逆向爬虫以及自动化脚本逆向爬虫以及自动化脚本逆向爬虫以及自动化脚本逆向爬虫以及自动化脚本逆向爬虫以及自动化脚本逆向爬虫以及自动化脚本逆向爬虫以及自动化脚本逆向爬虫以及自动化脚本逆向爬虫以及自动化脚本逆向爬虫以及自动化脚本

本系统主要包含用户登录、光伏设备实时监测模块、电站信息与设备信息查询模块、电站地理位置展示模块、电站信息管理模块、设备信息管理模块等多个核心功能模块，并能够调用高德地图API绘制电站地理信息图。

voicedna系统是对用户语音文件以及实时的音频流做一个声纹特征库，对接行业客户的库存语音文件以及实时的音频流做相关的业务场景应用，比如：声纹识别、聚类等功能用来实现反欺诈、恶意套贷等业务功能。

项目名称：项目三：基于头条巨量引擎，百度营销和阿里汇川爬虫软件架构：python3，cv2(open-cv)，muggle-ocr，pyppeteer项目描述：主要运用多进程和多协程通过opencv和muggle-ocr绕过滑动验证码以及复杂图片的验证，实现自动化入库投放渠道信息，通过spark和p

软件架构：python3，scala，spark，flink，实时数仓，离线数仓项目描述：主要通过spark构建离线数仓和flink构建实时数仓来实现风险监控、风险预警和风险数仓，通过监控指标和归因指标以及数仓建模实现自动预警，高效反馈关键考核指标的变化因素，支持风险团队的快速分析，高效定位问题，以

基本网站功能数据库主主复制ELK架构日志收集Promethus+Grafana实现集群状态收集和数据看板通过Grafana将告警信息通过DingDing通知harbor容器镜像仓库chrony三节点时间同步K8s部署的数据库使用NFS外挂存储

voicenet声网系统为公司自研产品供给公安技侦部门为案件侦查做声纹库的建设工作的一套系统，主要包含声纹采集、识别、清洗、比对等功能，可以为公安部门作为案件侦破手段以及关键证据的一套系统。

项目名称：项目一：开发大数据平台，基于大数据平台做用户画像软件架构：flink,hadoop,spark,presto,java,python3,mapreduce,shell,kafka,sklearn,doplinscheduler项目描述：每天从百度上百亿数据刻画用户画像来提高用户续费率。责任

订单采集：从上游接口批量获取订单数据。数据处理：去重、校验、标准化，并按“商品”维度归档。商品入库：将处理后的数据写入商品库并建立必要索引。数据同步：将商品库写入到云数据库。接口服务：持续监听小程序请求，将数据处理并返回。

官网页面动态展示接口设计官网会员中心模块以及订单模块国际官网接口实现（英文，日文，俄文）PCB价格计算模块逻辑实现自用ERP系统开发（前后端）使用宝塔自动化部署（国内）使用AWS(亚马逊)自动化部署（国外）