0
1
2
3
4
5
0
1
2
3
4
5
1月前来过
研发
上海全职 · 500/日 · 10875/月信用正常
工作时间: 工作日10:00-21:00、周末10:00-21:00工作地点:
远程
服务企业:
3家累计提交:
1工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
硕士学历，6年大数据开发工作经验
熟悉java、python、c/c++、scala等语言
熟悉hadoop、spark、hive等大数据组件
熟悉数据仓库
了解web后台开发
了解图像和机器学习算法
..........................................
..........................................
熟悉java、python、c/c++、scala等语言
熟悉hadoop、spark、hive等大数据组件
熟悉数据仓库
了解web后台开发
了解图像和机器学习算法
..........................................
..........................................
工作经历
2015-06-01 -2018-03-01百度研发
web后台开发: 大屏图表的数据接口开发，包括后台环境搭建、测试和上线 spark日志分析： 对nginx访问日志进行分析以发现web攻击行为
教育经历
2012-09-01 - 2015-06-01华中科技大学模式识别与智能系统硕士
华中科技大学2012级模式识别与智能系统专业
2008-09-01 - 2012-07-01中国地质大学（武汉）测控本科
中国地质大学(武汉)2008级测控技术与仪器专业
技能
作品
对公司业务线进行数仓建模，包含分层设计、etl任务开发、udf开发、业务报表开发，其中分为离线和实时任务，离线任务采用阿里云odps，实时任务采用阿里云flink。
02021-09-29 12:32
后台使用python语言开发，采用nginx+uwsgi+bottle+mysql架构，读取mysql后进行聚合、转换、分组、排序等操作，并将处理结果返回给前端图表展示。
02023-02-27 21:14
对业务线的nginx访问日志进行分析以发现web攻击行为。首先按ip+ua对日志进行分组并按时间顺序进行排序，然后按照设计好的规则进行分析，最后保存分析结果并展示。
02023-02-27 21:15
