Python

该论坛项目旨在为用户提供一个互动交流的平台。它为用户提供了了注册账户、发布 帖子、回复帖子等功能，以便用户进行知识共享、提问问题、相互交流等。同时也为管理员提供 了帖子、评论、用户维护等模块。

项目描述：将广告投放数据与手机订单成交数据进行入库，建立集成业务数据的数据仓库，通过数据仓库进行数据清理与手机卡销售的利润结算，将手机卡销售情况以不同维度，使用BI工具进行展示。 项目角色：数据仓库设计与开发、实现数据应用 编写python脚本，提供数据入库的工具，通过jupyter可视化界面，实现上传数据并执行脚本，供运营人员实现数据入库。收集可获取源数据的API接口，使用定时程序的方式获取数据并入库。 结合业务数据划分与数据结合过程中的容错率，设计数据仓库结构，编写python脚本实现数据仓库数据的清理、计算、统计，随着数据量增长使用hive数据库与pyspark实现数据仓库的数据更新。 BI工具与DA层数据表进行连接，绘制BI界面进行展示。BI展示不仅用于业务观察，还要用于发现异常数据，将异常数据进行反馈，获取解决方案，解决方案包括数据处理规则扩展、业务数据逻辑调整、反馈源数据存在的问题进行修复等。

1利用python scrapy爬虫框架进行数据获取，豆瓣书评需要完善的伪装才可以获取到数据，对数据存在的位置也要详细的分析。

1.功能模块：数据可视化；损失函数；梯度下降等 2.技术栈：Python，pandas，numpy，matplotlib等，实现多变量线性回归模型，对训练集进行学习训练，得到最佳模型参数进行收益预测

利用requests对猫眼电影 网站进行数据获取，存在的难点有字体反爬，以及实时数据获取，需要利用ocr进行字体识别以及js逆向分析

学校教务管理系统，可作为课程作业。 一、功能模块 1.学生端：选课、退课、查看课表、查看成绩等。 2.教师端：登记成绩，查看课表，查看课程学生表，查看课程成绩分布情况等。 3.管理员端：对各个表进行增删改查，管理选课排名（一键踢人）等。 二、技术实现 1.前端：HTML、CSS、JS、Jquery、Bootstrap 2.后端：python，Flask 3.数据库：Mysql

基础数据挖掘EDA包括居民客户用电缴费习惯分析。用电客户缴费金额时间序列预测、客户用电情况预测分析，以及电力用户聚类集群分析与电力用户分类任务。 本项目荣获第十一届“中国软件杯”全国总决赛银奖。官网获奖名单公布地址：http://www.cnsoftbei.com/plus/view.php?aid=755

主要功能： 用户注册、登录、登出、权限校验、更新用户信息、文章分类设置、文章的增删改查、qa工具箱模块 技术实现： 1.使用python+flask框架进行开发，整体架构采用MTV开发模式 2.通过Blueprint蓝图进行路由的维护，实现路由分层管理 3.通过flask_script中Manager方法进行命令管理和使用 4.通过flask-sqlalchemy实现ORM映射，对MYSQL数据库进行操作 5.通过html+css+js+jquery+Bootstrap+tinymce对前端页面渲染 6.使用Docker+nginx+uwsgi实现容器化部署

IDC管理，虚拟化，k8s，中小企业网络搭建及运维 曾经主导过国家级大型会展核心项目运维工作，公有云，私有云，k8s 企业实践经验丰富，欢迎洽谈

1.功能模块：数据可视化；sigmoid函数；梯度下降函数等 2.技术栈：Python，pandas，matplotlib，sklearn等 3.功能：实现正则化逻辑回归

1、利用requests模块对目标网站进行数据获取 2.难点：数据不存在源代码中，需要对网页请求进行js逆向分析，才可以获取到数据

1、学生和教师信息的增删改查 2、我负责搭建Django框架，前端，后端，数据库 3、实现了一个简单的信息系统的登录查看和管理

项目由本人独立开发，以构建一个文本情感分析平台为目标，通过网络上爬取各 大社交平台的评论数据和算法模型的构建实现对输入文本语言的情感分析与预测。主要功能 模块有：爬虫、数据清洗分词、数据统计、情感分析、个人中心模块

1、该项目为银行业内首次完全采用分布式应用集群部署和分布式数据库，完成核心系统从AS400到x86架构的平滑下移，两地三中心共部署近千台服务器，同城双活、异地灾备，通过分布式架构提高了可扩展性和高度灵活性。涉及国内多个服务厂商以及多家公司的系统、软件等构建的庞大应用体系。作为系统和应用的运维人员，不仅要掌握各个系统应用以及流程步骤，还需要与各个部门、公司的负责人协同工作，解决生产问题，7x24小时持续保证核心下移项目中系统的稳定性、健壮性。 2、通过ITSM服务流程平台、交易监控、集中监控、监控大屏、智能分析中心、netcout、prometheus等多款工具实现高效、精确、自动化运维。

内容包括App接口和管理后台的接口。 框架：FastApi ，能自动生成 Swagger 风格的接口文档。 数据库：Mysql ，使用 sqlalchemy+pymysql 连接和访问数据库，使用 alembic 可自动迁移数据库。 使用 Redis 存储登录的 token，token 是基于 JWT。 功能：登录注册，微信登录，用户管理，上传文件等。 App接口：登录注册、微信登录、用户信息管理等； 管理后台接口：登录、用户管理、文章管理等；

主要设计了基于残差神经网络的入侵检测系统，使用kddcup99数据集，具有用户管理功能，数据捕获功能，模型训练功能，数据存储与可视化功能。实现了对网络流量的预测，保护用户上网的网络安全。

PVD 日志数据通过 PVD 接口传入，源数据存储在 Redis 中，包括 OEE 邮件推送 脚本每天推送只自定义收件人列表邮箱，OEE 数据同步至看板等多个功能。 责任描述： 主要负责该项目的二次开发和维护。其中主要涉及时间利用率，性能稼动率，OEE 等计算的实现模块，npi 计算模块的二次开发及多个模块的后期维护及优化工作。开发邮件推送， OEE 计算，NPI 计算等多个脚本

这是一个量化期货平台项目，我负责数据挖掘和数据分析相关的工作。 主要工作：爬取各大期货交易所期货相关数据和搜集相关的宏观经济数据，然后在公司的开发的量化期货平台上创建相关的表格以校验数据。 爬虫程序能够爬取数据入库，能增量入库，能够定时执行爬虫任务，还能在页面上查看爬虫的进度和数据校验状态。 项目业绩： 完成了相关数据的爬取入库，为公司量化期货平台提供了数据基础； 完成了对量化分析结果的图表呈现； 完成了数据库的优化，包括优化查询语句、优化索引和优化数据库配置；

1、检测数据中存在的波动、断层等异常点或异常区间； 2、使用python进行开发，时间卷积神经网络，同时使用一系列处理机制配合完成异常点检测工作。

这是一个数据爬取的项目，包括了一系列对数据的后续处理和操作，当然也是合法的 1，数据爬取 2，数据清洗 3，数据分析 4，数据可视化 5，数据存储（存到数据库）