Python

项目简介: 段子数据采集，对网站上段子作者，段子内容，点赞数据，不喜欢数据进行采集 项目架构: Scrapy框架+pymysql+pandas+Xpath 技术描述: 1.使用Scrapy框架对数据进行采集 2.使用xpath插件分析数据特征，对数据进行提取 3.添加请求头，Cookie，IP代理等信息，解决反扒问题 4.使用Git代码版本工具对项目代码进行管理 5.使用PyMysql将数据存储到Mysql数据库中 6.使用numpy对数据进行处理

这个项目旨在开发一个自动化工具，可从巨潮资讯网、上交所和深交所网站上，批量下载上市公司的定期报告。该工具将使用Python编程语言开发，并利用网络爬虫技术从指定来源收集数据。下载的报告将被保存在指定的文件夹中，以便后续分析和处理。此项目将提高定期报告的获取效率，为金融从业者提供有用的信息。

能够从国研网、橘子资讯、人行网站、新浪财经等多个公开数据来源采集信息。通过Python编程语言，我们将实施网络爬虫，定期抓取这些网站上的数据，包括经济、金融、政策等各个领域的信息。这些数据将被整理并存储，以供进一步分析、研究和决策使用。

python爬虫技术，熟悉相关库的调用，requests, selenium等技术的应用，已用作品如：二手房源的爬取，以及相关数据处理与分析，机器学习相关技术处理数据。

本项目旨在开发一个数据分析工具，能够自动解析上市公司的PDF报告数据，进行文本分析和提取关键信息。使用Python编程语言，我们将开发能够处理PDF文档的模块，并应用自然语言处理技术来提取财务数据、关键字和趋势。这个工具将有助于金融从业者更快速、精确地理解上市公司的财务状况和发展趋势，为决策提供有力支持。

主要负责用户域、安全域的系统设计、实施、维护，4个月内完成了用域系统从0到1的功能建设，3个月内完成了企业站0到1功能建设，负责带领小组成员完成其它日常版本建设和生产问题排查。 1.作为用户域研发Owner，参与用户域从业务架构设计，负责了从0到1的功能建设。主要负责用户会员中心to-B和to_c一体化、企业用户平台化等相关建设计和研发。帮助业务实现了全站用户门户化，客户管理便捷化，服务能力专业化。 2.为其它各域业务应用提供用户统一接入、服务统一鉴权能力，有效节省整体研发成本和提高功能投产效率。 3.排查解决各种线上问题，如内存渐近式高占用、公共组件请求中断状态错误、慢SQL、CPU飙高等。

1.项目包括登录、会员、权限、活动、规则、积分、积分兑换、等级、优惠券、支付、核销等模块 2.本人负责：等级、积分、支付等模块。使用 fastapi 开发框架、sqlalchemy、redis、pytest、docker 等， 3.难点及解决方案 （1）支付接口响应慢。使用异步编程与事件驱动方式处理支付成功后部分功能，比如：发优惠券、添加积分、短信通知等 （2）功能繁多，系统异常定位困难。对系统进行规则范部署与运维，使用CAT对系统进行监控与日志记录查询，系统异常时使用短信、邮件、钉钉等通知开发人员

全省教师评选黄炎培奖评分系统，从教师登录账号，上传评审材料，材料审核员审核材料，评分专家登录账号，对已通过审核的材料进行评分

利用python去简单的编写简单的atm机的简单运行原理，处理各个atm机当中发生的问题，利用代码去解决这个问题，其中有登录问题，账户问题，余额问题等

1. 负责了快乐众app产品技术选型、概要设计、详细设计、需求评估、数据库设计，制定了开发规范和接口规范。 2. 负责了电商商城商家入驻、商家交易订单分账系统、支付、短视频、直播、实时推荐算法系统相关技术的调研与选型。 3. 负责搭建了快乐众app服务端的架构与设计、具体后端服务包含用户登录授权服务、用户中心服务、支付服务、商品服务、 订单服务、秒杀服务、消息服务、短视频服务、直播服务、自动检查恢复数据服务、任务调度服务、apollo配置中心服务。 4. 负责与第三方平台技术沟通与对接。 5. 搭建了Serilog+Seq的开源日志系统。 6. 搭建了后端服务的配置中心服务，集成到各个后端服务中。 7. 制定产品的开发计划与测试计划，上线计划与app内测方案，并安排执行。 8. 安排开发部与产品部、测试部完成测试用例评审会，并制定测试方案和测试结果报告。 9. 整体统筹协调技术部与产品部、测试部、运营部完成产品的开发与测试、运营推广。 10. 负责研发技术架构设计、系统分析、产品开发、平台搭建、性能优化等具体研发任务。 11. 参与竞品的分析，优化产品相关功能。 技术架构： 1. 主要

- 领导团队搭建跨平台的 CRM 管理服务，利用前后端复用的服务跨平台支持了抖音，快手卖家，迭代完成卖家 CRM 管理，营销短信，订单关怀服务，在垂直领域排名靠前 - 在技术上主要负责框架设计，技术选型以及核心业务功能的开发，包括支付与订单体系升级，发送体系支持多通道接入与实时备灾能力支持

1.爬取英国各个地区的疫情数据到本地。 2.对疫情进行数据分析和可视化处理，将其中的数据做成简易明了的可视化图形。 3.根据得到的数据，得出一些统计性结论。

主要就是一个基于圣斗士IP的卡牌手游，战斗部分是技能驱动的实时战斗，UI层级是psd文件自动生成cavase后使用xlua来编写逻辑； 主要负责手游的前端UI逻辑功能层

**数据分析项目报告** **1. 项目功能模块和使用者功能** 本数据分析项目设计了多个功能模块，以满足不同使用者的需求，整体分为以下几个部分： - **数据收集模块（15%）：** 通过网络爬虫或者数据接口获取高中生的学术表现、社交活动、兴趣爱好等数据，确保数据的全面性和准确性。 - **数据清洗和预处理模块（20%）：** 对收集到的数据进行清洗，处理缺失值和异常值，以确保后续分析的可靠性。这一模块还包括将不同数据源的信息整合，建立一个完整的数据集。 - **统计分析模块（25%）：** 利用Python编程语言进行统计分析，包括描述性统计、相关性分析、可视化等，以深入了解高中生的表现和人口统计特征。 - **结果展示模块（15%）：** 将分析结果以直观的图表和报告的形式呈现给使用者，使其能够清晰了解高中生群体的特征和趋势。 - **用户交互界面（15%）：** 如果需要，可以开发一个友好的用户交互界面，使使用者能够方便地选择感兴趣的参数进行自定义分析，提高用户体验。 - **导出和分享功能（10%）：** 用户可以将分析结果导出为常见的数据格式或分享至社交平台

全程实现数据分析，使用机器学习深度学习算法，包括回归、分类、时序预测；图像分析包括语义分割、分类等内容，也可以做一些故障检测之类的项目和内容

能够支持虚拟机生命周期管理、大模型训练、云计算平台开发，对于虚拟化、go、大模型有相关的开发经验，支持疑难问题解决，如：机器异常故障、数据库性能调优等方面。

难度： Windows环境下的MES复杂性部署， Vue组件图形化创建， 不同曲线的定制, 各种线图的api制作， python 数据接口编写及解决。

获取客户回答的问题文本，通过深度学习算法对客户回答进行自然语言理解，进行情感分析打标。 从用户声音中提取关键词，对关键词进行整理分类并统计展示。

一个很简单的python小游戏，主要也就是人和狗之间的对战，人拥有武器对狗进行伤害，或者狗对人造成伤害，选择武器，来赢得胜利

主要功能： 1.建立车辆的本地坐标系，用于上位机下发轨迹及车辆轨迹跟踪控制、多车统一坐标系。 技术栈： 1.经纬度坐标转换为本地坐标，需计算旋转角构建旋转矩阵。