0
1
2
3
4
5
1月前来过
数据处理工程师
上海全职 · 500/日 · 10875/月信用正常
工作时间: 工作日19:00-24:00、周末09:00-23:00工作地点:
服务企业:
0家累计提交:
0工时
聊一聊
工作经历
2023-03-06 -至今常州马达科技有限公司数据处理工程师
公司主要提供人工智能的下游数据服务，提供数据采集，数据处理，数据标注等业务，同时接取一些外部开发任务，如：数据爬取工具等
教育经历
2020-02-10 - 2023-03-05常州工程职业技术学院大数据技术与运用专科
技能
作品
Crawlsy是一个分布式爬虫管理平台，支持多种爬虫框架，致力于提供一个简单、高效、稳定的爬虫管理系统。前端应用与主节点（DjangoBackend）交互，主节点负责与MongoDB、Redis、MySQL和工作节点进行通信。主节点和工作节点之间通过gRPC框架相互通信。任务由主节点中的Celery
02025-11-18 21:00
