不同数据类型写入方式不同
最近更新时间: 2019-10-28 03:10:11
不同数据源的具有不同的写入方式列表如下
| insert into | insert overwrite | append | 其他设置 | |
|---|---|---|---|---|
| COS（文本类型） | 每次运行是进行文件覆盖 | 进行数据的追加写入 | 1.是否写入表头 选择写入的源是否有表头，需要跳过 | |
| HIVE | 每次运行进行数据追加 | 档表有分区时，将分区数据进行替换。当表没有分区时，直接将表清空再写入 | ||
| MPP | 每次运行进行数据的追加 | |||
| Oracle | 每次运行进行数据追加 | 每次运行时将表清空再写入 | ||
| MySQL | 每次运行进行数据追加 | 每次运行时将表清空再写入 | ||
| HBase | 1.rowkey设置 在数据管理设置rowkey，这里只进行显示 | |||
| Redis | 1.KeyIndex
表名+选择多列+列间隔符
2.value type 和 mode
string-》set
hash-》hset、hmset
list-》lpush、rpush、mpush
set-》sadd
3.写入方式
标准模式 和 value转key模式 两种模式
4.是否设置有效时间
5.数据有效时间 是否设置有效时间选【是】显示 |
|||
| ES | 1.doc id生成方式 拼接列 -- 选择多列和间隔符 特定列 -- 选择一个列 随机UUID |