小蜘蛛
8天前在线
全职 · 1000/日  ·  21750/月
工作时间: 工作日08:00-20:00、周末08:00-20:00工作地点:
服务企业: 27家累计提交: 12工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

爬虫+后端双端开发经验,熟练使用Python、Go、C#等多种开发语言。

工作经历

  • 2022-06-01 -至今上海浦立思信息科技有限公司全栈开发工程师

    1. 负责电商平台-C端后端开发与维护 2. 负责视频流模块的开发以及 youtube 视频的抓取 3. 参与设计电商平台-商户端整体架构,以及订单、账单流水、物流、仓储等子系统的前后端设计与开发。 4. 负责搭建C端后台系统,并负责订单模块的前后端开发。

  • 2020-07-01 -2022-04-30上海趣迦网络科技有限公司后端开发

    前期作为爬虫工程师进入趣加,主要负责Facebook、Twitch、YouTube等主流平台网红数据爬取。为公司项目启动,提供400w+优质网红数据。 主要技术:Python、Go、Nsq、Mongo、Mysql等。 1. 从0开始,搭建了一个通用的爬虫平台,同时支持多个平台数据抓取。 2. 支持数据定制,对于短期临时项目,能够做到快速开发,快速上线。 3. 智能告警,并实时推送至钉钉。 4. 支持日志,能够快速定位问题。 后期由于业务调整等原因,从0-1通过自学转型Golang后端开发,负责或参与开发以下项目: 主要技术:Go、go-zero、微服务、Redis、Mongo、Nsq、k8s、docker等。 ● IGS:一款内嵌于游戏的直播客户端SDK(目前已上线state of survival、King of Avalon),负责直播逻辑的开发以及相关数据报表、数据分析。 ● Stream Play:直播客户端内小游戏,负责开发别扎堆、套娃、抢奥利奥、眼疾手快等小游戏的开发。 ● Starscape app:一款直播工具,负责主播数据分析以及相关后端接口开发。 ● Starsc

  • 2016-11-01 -2020-07-01北京弘亚世纪投资顾问有限公司上海分公司技术分析工程师

    负责针对不同网站,编写爬虫,采集数据并做简单分析。 主要技术:C#、Python、Selenium,Jadx、Frida等反编译工具 项目职责: 1. 负责将分析师提出的需求转化为具体的实现,并提供报表。 2. 针对不同网站,采用不同爬虫策略,编写稳定,可维护的爬虫系统项目。 3. 针对不同网站的反爬措施,研究对应的反反爬策略。 部分项目列举如下: ● 直播类:陌陌、虎牙、斗鱼、yy等直播平台在线人数、订阅量、主播收入主要信息等抓取 ● 游戏类:Wow服务器状态,各应用市场app下载量等信息***端游戏排行榜 ● 生活服务类:安居客二手房抓取,58同城广告业务 ● 电商类:网易考拉、严选等平台商品信息以及销售额抓取。 ● 视频类:爱奇艺,乐视,搜狐,腾讯,优酷视频播放量抓取 ● 微博Mobile&PC广告抓取 ● 京东微选小程序端抓取 ● Bilibili用户付费用户,视频等信息抓取 ● 快手广告抓取。

  • 2015-06-28 -2016-10-31上海微创软件有限公司软件工程师

    主要负责微软ERP产品Dynamic Ax的相关开发与维护。 主要技术: X++, C#, C++, MS SQL 项目职责: 1. 对于客户提出的问题,负责提供解决方案并撰写英文文档解释问题的原因 2. 与微软技术人员或者底层开发人员合作解决项目中的关键问题和技术难题 3. 系统版本一直 4. 编写单元测试代码

教育经历 和TA聊聊

APP扫码和程序员直接沟通

  • 该用户选择隐藏教育经历信息,如需查看详细信息,可点击右上角“和TA聊一聊”查看

技能

0
1
2
3
4
5
0
1
2
3
4
5
作品
陌陌、虎牙、安居客、58、爱优腾等网站app数据抓取

负责针对不同网站以及app,编写爬虫,采集数据并做简单分析。 主要技术:C#、Python、Selenium,Jadx、Frida等反编译工具 项目职责: 1. 负责将分析师提出的需求转化为具体的实现,并提供报表。 2. 针对不同网站,采用不同爬虫策略,编写稳定,可维护的爬虫系统项目。 3. 针对不同网站的反爬措施,研究对应的反反爬策略。 部分项目列举如下: ● 直播类:陌陌、虎牙、斗鱼、yy等直播平台在线人数、订阅量、主播收入主要信息等抓取 ● 游戏类:Wow服务器状态,各应用市场app下载量等信息抓取,*,qq端游戏排行榜 ● 生活服务类:安居客二手房抓取,58同城广告业务 ● 电商类:网易考拉、严选等平台商品信息以及销售额抓取。 ● 视频类:爱奇艺,乐视,搜狐,腾讯,优酷视频播放量抓取 ● 微博Mobile&PC广告抓取 ● 京东微选小程序端抓取 ● Bilibili用户付费用户,视频等信息抓取 ● 快手广告抓取。

0
2024-04-07 17:22
Blidz电商系统消费者端

本项目为Blidz电商平台消费者端。主要负责了以下部分: 1. 负责视频流的开发,从第三方平台(如Youtube)抓取短视频,并上传至内部系统,最终通过Feed流展现出来。 2. 负责货币系统的开发以及新老数据的迁移。 3. 其他相关开发与维护。

0
2024-04-07 17:13
Blidz电商平台商户端

本项目主要是面向商户端的一个管理系统,提供商品上传、维护,订单管理、人员管理、流水、账单管理等功能。 主要负责了以下部分: 1. 参与设计整体架构以及各子系统的功能。 2. 负责订单、账单流水、物流、仓储等子系统的前后端设计与开发。

0
2024-04-07 17:07

2 人评论
用户评价

用户386539
15231382019
非常感谢
用户249570
资深Java开发
希望做好后期的维护工作。
更新于: 04-07 浏览: 479