# 日志分析系统 ## 系统架构 本使用kafka,spark,hbase开发日志分析系统。 ![architecture](/docs/images/architecture.png "architecture") ### 软件模块 * Kafka:作为日志事件的消息系统,具有分布式,可分区,可冗余的消息服务功能。 * Spark:使用spark stream功能,实时分析消息系统中的数据,完成计算分析工作。 * Hbase:做为后端存储,存储spark计算结构,供其他系统进行调用 ## 环境部署 ### 软件版本 * hadoop 版本 : Hadoop相关软件如zookeeper、hadoop、hbase,使用的是cloudera的 cdh 5.2.0 版本。 * Kafka : 2.9.2-0.8.1.1
2025-06-03 23:22:34 232KB 分析系统
1
eclipse构建HBase开发环境并运行实例对Hbase建表增删改查。本次HBase版本为hbase-0.90.5版本,Hadoop版本为Hadoop-0.20.2版本。
2021-11-08 14:09:52 366KB HBase
1
本人亲手操作搭建Hadoop集群成功(Hadoop集群的安装请移步本人空间查看资源),并安装好HBASE进行程序的开发,步骤详细完整,在相关过程中配有完整代码和解释,全程无误,只需复制粘贴即可,小白新手按步骤一步一步来也能操作成功并进行HDFS和HBASE程序开发!!!喜欢请关注本人空间动态,并会一直更新相关大数据资源和文章,谢谢!
2021-02-26 15:11:09 2MB HDFS HBASE HDFS开发 HBASE开发