赛迪教育 - ccidedu - 数字化人才在线学习平台

该项目分别使用Canal和Kafka搭建各自针对业务数据库和用户行为数据的实时数据采集系统，使用SparkStreaming消费Kafka实现精确一致性消费。搭建高吞吐的数据实时处理模块，选用ES和HBase作为最终的实时数据处理结果的存储位置，并从中获取数据采用DataV进行展示。采用ClickHouse进行数据分析。针对ES和HBase对外发布接口，方便外部查询。