HDFS

本项目搭建Hadoop分布式存储环境,搭配Spark框架实现离线文本词频统计。原始文本文件上传至HDFS分布式文件系统,使用PySpark编写业务逻辑,完成文本分割、单词提取、分组聚合,最终输出词频排序结果,并将统计结果回写保存至分布式存储。项目完整复现“分布式存储+离线计算”经典大数据架构。在实操
650Python云计算
按功能域(基础域/活动域/资源域/来源域/IM域)分层进行数据采集与清洗在报表中,我们开发十大屏,其中包括p/uv,用户活跃,家校共育,im模块统计等来查看平台运行状况
1210Java教育校园
按功能域(基础域/活动域/资源域/来源域/IM域)分层进行数据采集与清洗在报表中,我们开发十大屏,其中包括p/uv,用户活跃,家校共育,im模块统计等来查看平台运行状况
1500Java云计算
当前共3个项目more
×
寻找源码
源码描述
联系方式
提交