1. 对于我们写的function函数，一次处理一整个分区的数据
2. 对于一个分区内的数据，创建唯一的数据库连接
3. 只需要向数据库发送一次SQL语句和多组
2022-08-04 22:00:31
905KB
1
1.从HDFS中加载数据到DataFrame中
2.注册UDF函数，函数名为toUpper就是将所有名字变成大写
3.创建临时视图，然后执行注册的函数
2022-08-04 21:00:35
430KB
1
1. Spark作业的大部分task都执行迅速，只有有限的几个task执行的非常慢，此时可能出现了数据倾
2. Spark作业的大部分task都执行迅速，但是有
2022-08-04 21:00:21
835KB
1
1. 主控采用 Anlogic 高性能 FPGA 芯片 EG4S20BG256
8. 一个 USB 转串口
9. 一个最高 24 位 VGA 接口（GM7123
2022-08-04 14:00:24
229KB
1
文件共有七部分组成，分别是spark、hive、Hbase、flink、zookeeper、Hadoop、kafka。包含了各部分组件的基础概念，寻常提问方向，通过大量前人实际总结归纳整理。从理论基础开始，拥抱大数据。
2022-07-31 09:05:48
4.73MB
1
运行软件：idea 带报告
基于ssm框架，整个系统划分为View层，Controller层，Service层，DAO层四层，使用Spring MVC负责请求的转发和视图管理，Spring实现业务对象管理，Mybatis作为数据对象的持久化引擎。
2022-07-30 16:33:22
26.09MB
1