标签: Inceptor
thumbnail

bzip2压缩缓解text表文件占用过大问题

概要描述 同事反馈,集群中有一些textfile表文件过大,占用大量hdfs存储空间,本文主要介绍如何通过bzip2压缩方式减少hdfs占用。 标准的textfile是无压缩格式……
thumbnail

Quark如何查看表占用空间的大小

原理描述 经常会遇到客户需要获取一张表占用空间的大小,或者需要清理空间、排查哪些表占用空间过大的诉求,这时候可以用到inceptor中的数据字典表system.tabl……
thumbnail

Inceptor sql 的 task 数量

概要描述 inceptor sql 提交后的 task 数目会影响性能,本文简单介绍一下决定一个 sql 对应的 task 数目的几个因素; 详细说明 主要分为 map 阶段 和 reduce ……
thumbnail

csvfile大文件入库问题

概要描述 CSV表的数据来源是CSV文件。CSV文件是纯文本文件,文件中包含数据以及分隔符。和TEXT表相似,CSV表最常见的使用场景是用于建外表,将CSV文件中的数据……
thumbnail

Inceptor 数据导入导出之Insert overwrite

概要说明 面对一些重要数据,很多场景下都需要将数据仓库进行复制,这可以是整个数据库的更广泛级别,也可以是较小的级别,例如表或分区。本案例将演示使用In……
thumbnail

Dbvisualizer工具连接Inceptor

概要描述 dbvisualizer是一款可视化的数据库编程工具,这款软件以JDBC的方式来连接数据库,因而不仅可用于操作DB2数据库,也可用来操作oracle,SQLSERVER等。……
thumbnail

Dbeaver工具连接Inceptor

概要描述 DBeaver是一个免费的跨平台数据库工具,适用于开发人员、数据库管理员和分析师,支持所有流程的数据库:MySQL,PostgreSQL,MariaDB,SQLite,Oracle,DB……
thumbnail

Inceptor分区分桶须知

概要描述 我们知道传统的DBMS系统一般都具有表分区的功能,通过表分区能够在特定的区域检索数据,减少扫描成本,在一定程度上提高查询效率,当然我们还可以通……
thumbnail

Inceptor如何计算时间差

概要描述 inceptor如何通过timestampdiff函数等方式,计算各种时间单位的时间差 这里介绍下timestampdiff函数: 函数用法 返回类型 描述 timestampdif……
thumbnail

Inceptor 通过xml文件配置 Furion 调度模式

概要说明 Inceptor Scheduler支持三种资源调度策略:FIFO、FAIR、FURION。 其中FIFO和FAIR是兼容了Spark中对应的调度算法,管理的粒度是TaskSet。FURION是Inc……