系统架构: Hadoop+Zookeeper+Hive+Flume+Kafka+Storm+Redis+Sqoop+ELK+INFRA+Jupyter
1. 参与调研和讨论各组件版本的选择;
2. rpm包命名及包目录结构定义规范;
3. 编译大数据基础组件成rpm包;
4. 与Ambari进行集成,编写stack;
5. 负责数据的流转、数据清洗以及任务开发
6. 负责单点登录功能的开发;
7. 负责数据可视化支持分支功能、数据明细、分享、菜单权限等功能开发;
8. 数据服务-支持多数据源;
9. 数 据 主 题 - 支持多数据源 ;
10. 负责维表join以及双流join开发
点击空白处退出提示
评论