对大数据量进行数据清洗、打标签的一系列操作，确保最终数据的的准确性和可靠性。 使用到的技术栈有：spark，hadoop，hive，mysql，springboot，python等做数据的处理和程序的搭建

项目分为三大模块，1.底层模块：负责与三方服务做交互，处理DB请求等。2.业务模块：处理所有的业务功能和对应业务任务的启动及下发。3.后端服务，负责与前端交互，处理请求的分发

1. 参与前期需求整理、参与数据库结构数据库表设计。 2. 权限管理:为不同的职位分配不同的权限、为员工分配职位。 3. 员工管理:员工信息的录入和员工的信息管理、入职离职管理。 4. 单点登录、注册:注册成为会员之后可以登录有更多的权限:购买课程、申请成为讲师等。 5. 讲师管理:讲师招募、讲师发布的课程信息管理、以及上传的课时、课件管理。 6. 首页管理:轮播图管理、头部导航栏管理、底部文章管理、课程分区管理。 7. 课程管理:课程分类、课程介绍、课程的章节管理、课时课件的管理。