[Apache Doris Load] ETL_QUALITY_UNSATISFIED; msg:quality not good enough to cancel

异常说明:数据质量不好,导致不能doris不能解析或者解析失败而取消导入任务 可能原因: 1. varchar字段太长;分隔符问题 2.  too_many_filtered_rows 解决方案 长文

数据分析

2020-09-29

1

0

[Apache Doris Load] hive-2-doris:No source file in this table(xxxx)

 可能原因:fe通过broker读取hdfs的文件列表时, 返回空文件列表,如下图所示load语句中hdfs文件配置和实际hdfs文件配置:   0.12.8.release版本不支持子目录文件形式,

数据分析

2020-09-29

1

0

[Apache Doris Load] too many filtered rows

可能原因: 分隔符分隔的列和doris中的列不一致。 解决办法:调整分隔符,尽量用不常见的,参考特殊符号:https://baike.baidu.com/item/%E7%89%B9%E6%AE%8A

数据分析

2020-09-29

2

0

[Apache Doris] hive 2 doris:ParseError, Invalid column selected _colXXX

  可能原因1 doris中的表结构和字段类型与hive中表字段结构不一致 比如spark计算后生成的orc表头和doris中的不一致。如下为hive和spark分别生成的orc文件表头, 不管hiv

数据分析

2020-09-29

1

0

Apache Doris如何升级fe, be

技术:apache doris 运行环境:centos7 demo功能:提供一个升级be, fe的步骤 步骤1: 准备新be/fe的更新包 可以通过scp命令将升级包拷贝到be、fe机器上 scp -

数据分析

2020-09-29

0

0

doris如何本地调试hdfs broker

技术:doris 运行环境:doris demo功能:提供一个doris本地调试hdfs broker组件 下载源码 源码地址:https://github.com/apache/incubator-

数据分析

2020-07-14

5

0

hdfs常用命令

技术:hdfs 运行环境:hdfs demo功能:提供一个hdfs常用命令 常用命令 (1)查看帮助 hdfs dfs -help (2)查看当前目录信息 hdfs dfs -ls / (3)上

数据存储

2020-07-14

3

0

doris从kafka导入数据

技术:doris 运行环境:doris demo功能:提供一个从kafka导入数据的命令 命令 CREATE ROUTINE LOAD 数据库名.任务名,每次导入需要不一样 ON doris数据表名

数据分析

2020-07-14

3

0

doris http导入数据,也叫流导入

技术:doris 运行环境:doris demo功能:提供一个doris流导入数据 命令 curl --location-trusted -u doris管理员用户名:密码 -H "label:导入任

数据分析

2020-07-14

8

0

hdfs和doris数据互相导数据

技术:doris 运行环境:doris demo功能:提供一个从hdfs中导入数据到doris中的过程 前置条件 通常hive、spark等计算结果保存为orc文件,存储在hdfs中 hdfs导入do

数据分析

2020-07-14

23

0

搜索文章