1. 首页
  2. 存储
  3. 其他
  4. 海量数据管理课程大作业数据处理与优化实践

海量数据管理课程大作业数据处理与优化实践

上传者: 2025-06-11 15:48:22上传 ZIP文件 56.28KB 热度 9次

海量数据管理课程的大作业,内容挺全,方案也蛮实用。张星宇同学从批、流、存储、消息这几个方向出发,搭了一个完整的数据系统,基础扎实、细节到位。MapReduce 做离线统计,比如算新闻评论字数,用 Hadoop 跑批任务没啥压力;Storm 实时点击流,Spout 和 Bolt 配起来,流转逻辑也挺清晰。MongoDB 存用户数据,Redis 缓缓存,Kafka 做消息队列,这些搭配在项目里还挺常见,组合得也合理。如果你正好在搞大数据方向,想搭个稳一点的链路,这份大作业的架构可以参考下。

下载地址
用户评论