🌳 在线旅游大数据平台项目
日期任务清单
项目开始日期: 2024-06-11
- 了解项目的背景以及整个系统的架构
- 了解系统需要完成的主要功能
- 了解系统整个架构
- 完成数据服务端的部署
- 完成数据客户端的部署
- 了解数据集
- 认识消息队列 Kafka
- 完成消息队列 Kafka 的部署
- 了解消息队列 Kafka 的基本应用
- 使用 Flume 收集数据到 Kafka
2024-06-12
- 了解实时数据分析所用到的技术
- 了解
SparkStreaming
和Flink
- 了解
SparkStreaming
的核心概念 - 了解数据源
- 借助
netcat
实践Kafka
- 了解转换操作
- 具体实施任务:处理数据
2024-06-13
- 了解数据库连接池
- 了解如何向 MySQL 数据库中写入数据
- 借助
alibaba Druid
库实现一个数据库连接工具类 - 编写案例:
WordCount
- 具体实施任务,将代码中生成的数据写入
MySQL
。
2024-06-14
- 了解什么是 Kafka Offset
- 维护 Kafka Offset
- 具体实施任务,将 Kafka 的 Offset 配合
MySQL
用代码进行维护。
2024-06-17
- 进行后端开发
- 进行前端开发
2024-06-18
- 进行热力图的绘制
- 进行人流量柱状图的绘制
- 进行人流量趋势图的绘制
2024-06-19 项目结束日期
文件目录
[TOC]