doris官方提供的kettle-spoon的插件doris-stream-loader，数据抽取效率高

kettle版本需9.4.0.0-343 1、解压后放入data-integration\plugins目录下 2、重启spoon 3、在转换下批量加载中可以看到此插件 4、插件配置：其中Fenodes应配置“ip:端口”端口为http_port默认8030 5、数据库信息按情况填写，其他内容保持默认即可。注意表字段的大小写要和流字段的保持一致 Kettle-Spoon是Pentaho公司的一款开源ETL工具，用于进行数据转换和抽取。doris是一个高性能的分析型数据库，适用于海量数据的实时分析。doris官方提供的doris-stream-loader是Kettle-Spoon的一个插件，用于将数据高效地从Kettle抽取到doris数据库中。 使用该插件需要首先检查Kettle的版本是否满足要求，即为9.4.0.0-343版本。一旦确认版本无误，便可以将doris-stream-loader插件解压并放入data-integration\plugins目录下。操作完成后，需要重启spoon，即Kettle的图形化界面，以确保插件能够被正确加载和识别。 重启后，在spoon界面的“转换”下选择“批量加载”，便可以看到新增的doris-stream-loader插件。这时，便可以对插件进行配置。配置主要包括两部分，首先是Fenodes配置。Fenodes指的是doris集群中的节点，需要按照“ip:端口”的格式进行配置，而端口通常情况下是http_port，其默认值为8030。还需要填写数据库信息。在配置数据库信息时，需要注意表字段的大小写要与流字段保持一致，以避免数据不匹配的问题。 doris-stream-loader插件的使用大大提高了数据从Kettle抽取到doris数据库的效率，这对于需要进行大数据量处理的用户来说是一个福音。但需要注意的是，使用该插件时，对Kettle和doris的版本和配置都有一定的要求，只有在严格遵循操作步骤和配置要求的前提下，才能确保数据抽取的顺利和高效。