需求描述: 大数据中通过一些机器学习的算法去对电商数据进行分析处理,从而加工数据。
项目描述: python机器学习,需要实时计算,时间会比较长,而需要开发spark版本的提前计算从而减少时间
责任描述:使用spark开发电商标签中的订单最长的订单
项目技术:用spark+hadoop+hive+hbase+接口
实施结果: 已经通过批量跑批的形式提前计算存入hbase数据,通过接口进行调用
点击空白处退出提示
需求描述: 大数据中通过一些机器学习的算法去对电商数据进行分析处理,从而加工数据。
项目描述: python机器学习,需要实时计算,时间会比较长,而需要开发spark版本的提前计算从而减少时间
责任描述:使用spark开发电商标签中的订单最长的订单
项目技术:用spark+hadoop+hive+hbase+接口
实施结果: 已经通过批量跑批的形式提前计算存入hbase数据,通过接口进行调用
评论