[Apache Doris开发] Clion 如何本地导入 Be项目

技术:doris 运行环境:mac os demo功能:提供一个clion开发be简单环境 修改CMAKE文件, 设置gcc、Boost_INCLUDE_DIR路径 SET(ENV{DORIS_GCC

数据分析

2020-10-13

3

0

[Apache Doris开发] Be 如何编译Debug, Asan版本

技术:doris 运行环境:centos7 demo功能:提供一个编译be不同类型目标的方法 debug版本 这个版本会有更多的debug信息, 方便定位be问题 export BUILD_TYPE=

数据分析

2020-10-13

12

0

[Apache Doris Load] body exceed max size: 10737418240, limit: 10737418240

技术:apache doris 运行环境:centos 7 demo功能:提供http load 问题处理 原因 Be默认配置http load传输的消息体太小 处理 streaming_load_m

数据分析

2020-10-13

4

0

[Apache Doris Load] ETL_QUALITY_UNSATISFIED; msg:quality not good enough to cancel

异常说明:数据质量不好,导致不能doris不能解析或者解析失败而取消导入任务 可能原因: 1. varchar字段太长;分隔符问题 2.  too_many_filtered_rows 解决方案 长文

数据分析

2020-09-29

34

0

[Apache Doris Load] hive-2-doris:No source file in this table(xxxx)

 可能原因:fe通过broker读取hdfs的文件列表时, 返回空文件列表,如下图所示load语句中hdfs文件配置和实际hdfs文件配置:   0.12.8.release版本不支持子目录文件形式,

数据分析

2020-09-29

12

0

[Apache Doris Load] too many filtered rows

可能原因: 分隔符分隔的列和doris中的列不一致。 解决办法:调整分隔符,尽量用不常见的,参考特殊符号:https://baike.baidu.com/item/%E7%89%B9%E6%AE%8A

数据分析

2020-09-29

39

0

[Apache Doris] hive 2 doris:ParseError, Invalid column selected _colXXX

  可能原因1 doris中的表结构和字段类型与hive中表字段结构不一致 比如spark计算后生成的orc表头和doris中的不一致。如下为hive和spark分别生成的orc文件表头, 不管hiv

数据分析

2020-09-29

8

0

Apache Doris如何升级fe, be

技术:apache doris 运行环境:centos7 demo功能:提供一个升级be, fe的步骤 步骤1: 准备新be/fe的更新包 可以通过scp命令将升级包拷贝到be、fe机器上 scp -

数据分析

2020-09-29

4

0

doris如何本地调试hdfs broker

技术:doris 运行环境:doris demo功能:提供一个doris本地调试hdfs broker组件 下载源码 源码地址:https://github.com/apache/incubator-

数据分析

2020-07-14

7

0

hdfs常用命令

技术:hdfs 运行环境:hdfs demo功能:提供一个hdfs常用命令 常用命令 (1)查看帮助 hdfs dfs -help (2)查看当前目录信息 hdfs dfs -ls / (3)上

数据存储

2020-07-14

4

0

搜索文章