0
1
2
3
4
5
23小时前在线
技术主管
郑州全职 · 500/日 · 10875/月信用一般
工作时间: 工作日09:00-17:30、周末10:00-21:00工作地点:
远程
服务企业:
0家累计提交:
0工时
聊一聊
个人介绍
我是程序员客栈的爬虫开发工程师，一名后端数据采集开发； 我毕业于郑州轻工业学院，担任过北京剑鱼的技术主管； 负责过招投标全量数据分布式采集系统、网页浏览器仿真反爬程序、服务器运维调度工具的开发； 熟练使用 Go、Chromedp、MongoDB、JavaScript、Shell； 深耕网页爬虫、反爬风控处理、数据清洗入库、Linux 服务器部署运维，擅长解决网站验证码、IP 封禁、高频限流等采集难题，可承接各类网页数据抓取、自动化访问脚本、数据治理外包开发需求，如果我能帮上您的忙，请点击 “立即预约” 或发布需求！
工作经历
2011-07-01 -至今北京剑鱼技术主管
企业主营招投标大数据 SaaS 平台，提供全国招标、中标数据采集与商机分析服务。我担任技术主管，统筹爬虫、后端、运维技术团队，主导自研 Golang 仿真浏览器采集系统，迭代多套老旧采集方案解决平台验证码、IP 封禁风控问题；负责 Linux 服务器部署、流量资源管控、多网络轮询采集调度，实现单日稳定采集上万条增量标讯，优化数据入库去重、历史数据补采流程，同时管控开发人力与采集成本，规避账号、代理 IP 各类业务风险，支撑平台数据业务稳定运行
教育经历
2007-09-01 - 2011-07-01郑州轻工业学院计算机科学与技术本科
c语言基础，j2ee，jsp等课程，各项成绩优
技能
作品
系统包含四大核心功能模块：浏览器模拟采集模块、IP网络自动切换监控模块、流量统计预警模块、数据入库与增量去重模块。采集模块基于Chromedp模拟真人访问页面，规避基础人机校验；网络监控实时检测IP封禁状态，触发拦截后自动提醒运维切换公司宽带或*热点；流量模块统计各终端每日流量消耗，设置余量预警防
02026-07-18 17:26
