稳
14小时前在线
全职 · 300/日  ·  6525/月
工作时间: 工作地点: 远程
服务企业: 0家累计提交: 0工时
聊一聊

APP聊一聊

个人介绍

我是[稳],一名专注于数据采集与AI应用的后端开发者。

我的日常:

? 用Python写爬虫,突破各种反爬限制,把分散在网页里的信息整理成结构化数据? 把这些数据喂给AI智能体,让它们学会自动分析、决策甚至执行任务? 探索如何让“数据流动”变得更有价值,而不是停留在技术演示层面

在我看来,爬虫是触角,智能体是大脑,而Python是把它们连接起来的神经系统。

最近在折腾:[写一个你正在做的具体项目,如“自动抓取行业报告并生成摘要的Agent”]

欢迎交流技术或合作想法 ?

工作经历

  • 2023-02-09 -至今美好创亿Python开发工程师

    职位名称:Python开发工程师(数据与AI方向) 工作内容: 数据采集层:主导设计分布式爬虫系统,基于 Scrapy + Selenium/Playwright 框架,攻克目标网站的反爬策略(如动态Token、IP封锁、验证码识别),实现日均稳定抓取 [XX]万 条结构化数据,数据可用率达 99% 以上。 数据处理层:利用 Pandas/Numpy 对原始数据进行清洗与归一化,并设计标准化API接口,将实时数据流接入消息队列(Redis/Kafka),为下游AI应用提供高质量数据源。 智能体应用层:基于 LangChain/LlamaIndex 框架,结合爬虫获取的实时业务数据,构建具备自主检索与决策能力的RAG智能体(Agent)。该智能体能自动读取最新数据并生成分析报告/自动回复,将原本需要 [X]小时 的人工数据分析工作缩短至 [X]分钟。 工程化落地:使用 Docker 封装爬虫与Agent服务,配合 Airflow/Apscheduler 实现定时调度与异常告警,保障系统7x24小时稳定运行。

教育经历

  • 2017-06-14 - 2019-10-03重庆经贸职业学院汽修专科

    技术成长:自学Python全栈,累计独立产出 20个爬虫与AI应用项目。 跨界能力:利用英语专业优势,无障碍阅读海外技术文档(如LangChain官方API文档),能高效处理英文网站爬虫与英文语料Prompt工程。

技能

Python熟练
0
1
2
3
4
5
作品
自动化私活接单

自动化私活接单/├──proginnData/#Scrapy项目(课程模板)│├──scrapy.cfg│└──proginnData/│├──items.py#数据字段:title/desc/price/skills/industry/url│├──pipelines.py#数据清洗:拆价格、去标

0
2026-06-27 10:31
更新于: 14小时前 浏览: 4