项目名称:网站日志分析系统(2016.08-2017.04) 开发环境:Eclipse、Mysql、Maven、Jdk 主要技术: 实时:Storm、Kafka、Mysql 离线分析:Flume、Hdfs、MapReduce、Redis、Hive、Sqoop、kettle、Mysql 项目介绍: 根据网站的Access、UGC日志,分App维度、总的,离线统计每天的UV、PV、登录人数、次日留存和七日留存。根据用户实时产生的UGC日志,分App维度、总的,实时统计用户每分钟一次的充值和消费情况 。 离线分析:整个离线处理流程使用kettle监控任务并调度。 1、数据采集:将用户的Access、Ugc等日志通过Flume采集,按天和业务分目录存储到HDFS上。 2、数据清洗:每天定时通过MR清洗前一天的原始日志数据,Load到Hive表中。 3、数据分析:编写Hive语句和Shell脚本统计指标,并将统计之后的指标使用Sqoop导入到Mysql,使用Kettle将Mysql中与hive表对应的
1720大数据
主要业务方向:后台系统,三方平台,微信小程序,响应式官网。 技术点:vue全家桶,uniapp,微信小程序原开发。 对前端性能优化有着丰富的开发经验,掌握节流,防抖,长列表懒加载,webpack打包等优化方案。 有后端开发经验,使用过express,QA,egg等中间件进行开发。
1570文档原型图
项目名称:实时处理平台(2017.05-2017.11) 开发环境:Eclipse、JDK1.7 主要技术:Log4j、Flume、Kafka、Storm、Mysql、Hbase 项目介绍: 监控比价项目中爬虫的爬行能力、每天的抓取数量、抓取一个网站需要的时间、还 有抓取失败的商品数据等指标信息,项目中使用Flume、Kafka、Storm实现一个流式处理 平台。 项目主要分5个模块:日志数据收集层、数据缓存层、数据处理层、指标展现层、 数据备份层。 1、日志数据收集层:在每台爬虫机器上部署一个Flume Agent,负责采集爬虫日志 信息,并发送给Kafka集群。 2、数据缓存层:使用Kafka接收Flume的日志信息并缓存,等待Storm处理。 3、数据处理层:主要是Storm实现,对日志信息处理,统计关键性指标做汇总,定时的存入MySql中,供Web界面统计出图表。 4、指标展现层:主要使用Echarts出图表。 5、数据备份层:目的是对爬虫的原始数据进行备份。 项目问题: Storm重复消费数据问题,Storm和Kafka整合log4j实现冲突问题,
1300大数据
本项目就是基于Redis中跳表数据结构实现的轻量级键值型存储数据库,使用C++实现。主要功能有插入数 据、删除数据、查询数据、数据展示、数据落盘、文件加载数据,以及数据库大小显示;如果想自己写程序使用这个键 值对型存储引擎,只需要在你的CPP文件中导入接口就可以使用。 • 主要工作:1.针对跳表进行增,删,改,查的操作; 2.可以将数据保存到自定义文件,与Redis中将数据生成数据快照保存到dump.rdb文件功能类似; 3.压力测试,通过shell脚本测试数据库的性能; • 个人收获:通过编写简单的基于跳表数据结构实现的键值对存储数据库,可以熟悉跳表这种熟悉结构,并且也可以学习 关于Redis中存储方式一些知识;虽然这个项目只能存储整型,字符串类型,后期可以将其他的类型都加进去,尽量做 的完整的存储引擎。
3210 PC网站
1. 系统设置,管理用户信息,权限管理 2.调度管理,对系统跑批进行调度,任务进度,已经跑批日志 3.参数管理,对系统的基础参数做修改及查看 4.情景模式,对不同的情况,做不同的部署 5.报表管理,包含监管指标,检测指标,存款指标,同业指标等,以及缺口分析,压力测试等
1610运维
主要负责特陈资源方面后台的开发与维护 超市的堆头处理 与供应商的合同管理 进行之前代码的优化 与新需求的开发 主要针对特别陈列的统一管理
1280
主要是维护步步高钱包小程序 参与小程序方面的优化修改 增加支付渠道 西瓜分期 与第三方联调接口 封装接口
2600金融
项目分为:商品管理、商品类型管理、活动管理、优惠券管理、红包管理、众筹管理、订单管理、购物车管理、广告管理、文章管理、砍价、评论管理、主题管理等功能模块; 我负责:需求分析、后台系统架构及开发、数据库设计、接口开发及调试、公众号api接口对接,项目部署; 后台使用liunx+nginx+mysal+redis+php,框架thinkphp; 前端使用HTML+vue开发; 用微信分享+微信支付+消息模版推送;
2000电商
唯图网致力于打造专业的摄影及创意的交易平台,为摄影师\模特\创意设计师 /插画师提供一个图片作品交易及拍。摄服务的网络交易平台。为广告、媒体、 传媒、企业、相关机构提供一个专业的图像资源服务平台。 职责: 1、主要负责唯图网平台中图片的在线发布、在线购买以及管理功能 2、主要负责平台bug的修改
1040金融
独立开发的 uniapp “链每天”小程序以平稳运营三年左右,日活量有几千人。该小程序是积分商城项目,项目有着复杂的积分逻辑。
1760
国网湖北省电力公司定制开发的变电运维系统,满足电力公司变电验收、变电运维、变电检测、变电评价和变电检修五个寿命环节,同时提供排班人员定位签到等功能方便客户使用 责任描述:根据需求开发项目,修复客服反馈的问题,前往现场进行与客户沟通提供技术支持,与其他数据中台以及其他公司进行对接 1. 人员轨迹功能开发,根据任务卡与工作地点自动计算工作人员到位情况 4. 数据采集功能设计开发,对接其他公司的测量仪器,自动收集测量数据,同时集成图像识别模块,支持用户在手机端拍摄或上传图片自动识别数据
1910
包装设计,根据客户的需求进行设计,设计到客户满意为止,下面是一部分真实成交的案例,这之中不乏一些根据客户要求修改了5次以上的
1430UI设计
项目名称:比价平台(2017.12-2018.06) 开发环境:Eclipse、Tomcat7、JDK1.7 主要技术:Httpclient、Htmlcleaner、Xpath、Hbase、Redis、Solr、SpringMvc、jquery、Echarts、Zookeeper、Ganglia 项目介绍: 该项目主要是抓取京东、易迅、国美、苏宁等电商网站的商品,获取商品的标题、价格、规格参数等信息,在前台界面为用户提供商品搜索查询,以及商品比价等功能。 项目主要分为6个模块:数据下载层、数据解析层、数据存储层、数据处理层、数据展现层、系统监控层。 项目问题:ip被封,网站页面结构变动。 职责描述: 1、负责商城的数据爬取收集,从电商页面,解析出商品的明细信息,商品的价格,商品的图片等信息 2、负责系统的监控,利用zookeeper对集群中的各个节点进行监控,当其中的有节点宕机了,会用邮件通知运维人员进行相应的处理 3、负责将获取来的数据信息存放到hbase数据库中,并且对数据建立索引等操作
1480大数据
项目名称:智网大数据平台(2018.07-2018.12) 开发环境:SecurceCRT、Centos7.2 主要技术:Shell、Jenkins 项目介绍: 在大数据时代的环境下,公司需要有效利用多源、多结构数据,安全地进行数据加工和增值,建设公司自有数据能力并进行转化。因此公司对于大数据平台的数据生产(汇聚存储多源数据、自动化清洗与入库)、分析加工能力(公司经营分析报告、公司数据洞察报告)、数据安全(严格保证数据安全、多租户环境用户控制)和能力开放(多样化对外开放能力、平台能力模块化租赁)四个方面有极高的需求。 职责描述: 1、编写shell脚本每天定时采集接口机数据并入库到Impala数据库中。接口机数据包括JPO、AMSP、廊坊。 2、负责在线商店、TBOSS等结构化数据采集到Impala数据库中。 3、编写shell脚本对AMSP数据进行数据清洗操作。 4、编写shell脚本对接口机数据、入库后Impala表中的数据进行监控。 5、通过Jenkins对服务器之间的脚本进行作业调度与监控。 6、周期性检查每天的数据是否都入库,对于缺失的数据采取对应的措施。
1490大数据
提供给各地多家医院的临床试验项目管理系统,同时根据不同医院的工作流程提供定制化服务 责任描述:根据需求开发项目,修复测试与客户反馈的问题,前往现场进行与客户沟通提供技术支持,与医院进行经费人员部门等数据对接 1. 合同管理流程开发,经费功能开发,前期开发人员部门导入功能,方便医院导入人员与部门数据,后期对接医院信息部,实时同步医院修改添加的部门与人员数据 2. 医院单点登录功能开发,对接医院信息部,实现医院系统一键登录CTMS系统功能 3. 伦理会议伦理投票功能开发,物品交接功能开发
2700
项目属于二开,在原有基础上做业务拓展,业务范畴属于电商,区别于别的电商平台的业务点在于积分兑换商品,用户积分来源于很多大型平台,如电信、联通、南航、海航等,这几个平台的积分和聚分享是互通的,用户可以使用任意平台积分抵扣订单金额。项目服务端架构使用了 thrift springboot。数据使用了mysql,中间件用到了mq,es,redis等
1720APP
项目描述:绿色金融综合服务平台专注可持续发展(ESG),通过标准构建、量化评估等方式,助力企业在促进经济繁荣的同时也保护地球,做到义利兼顾,促使人们践行绿色生活、低碳出行; ● 相关技术:Java、SpringBoot、Mysql、Mybatis Plus、Redis、Nacos、OSS、RocketMQ、ELK、Docker、Shiro、Vue、js、css、Nginx、Swagger2 ● 主要职责: 1、参与功能需求的评审与分析,功能模块拆解 2、进行数据库表设计,及接口设计和编写技术文档 3、主要负责碳核算模型相关模块的功能开发、为微信公众号、小程序提供接口 4、进行 code review 保障代码的可用性、高效性、易读性 5、编写单元测试,保障接口的正确性,日常维护和线上 bug 定位与修复 6、模块代码重构与优化
1480
为解决医院用人和CRC就业问题打造的小C精灵系统,可提供给医院与CRC双方共同使用.同时提供运维角色,负责维护小C精灵平台门户,医院等信息 医院端:可以查看项目信息工作汇报等信息,处理CRC加入医院加入项目等各种审核. CRC端:可以填写个人档案,进行申请加入医院.加入后可以查看,申请加入或添加对应医院的项目,同时进行工作汇报,方便医院了解项目进度 运维端:可以修改首页展示的新闻资讯,培训视频,专家介绍等信息,审核医院发布的机构资讯.同时给合作医院开通账户,提供客服服务 责任描述:根据需求开发后端接口功能,编写apifox接口,与前端对接完成项目任务 1. 首页新闻资讯,机构资讯,培训视频,专家介绍功能开发.资讯接口根据发布时间进行排序,提供翻页功能,方便用户查看详情时快捷浏览上下篇资讯.资讯提供发布停用功能,方便运维调整首页展示内容.同时针对医院发布的机构资讯提供运维审核功能,只有运维已审核通过的机构资讯才展示在首页 2. 医院与CRC端项目管理,项目审核,工作汇报,工作交接功能开发.项目根据配置的工作汇报频率初始化为周月季或年报,针对单独项目也可以单独修改工作汇报频率,本期工作
6370
微信群发助手源文件源码
在发送人excel中添加发送人微信名称或昵称,在文本框内输入要发送的内容,点击发送即可一键群发。 联系作者:754149742@qq.com
2410
他是我在网页之中制作的一个动态的图片,通过@keyframes TieShanKao的方法,我将图片实现了可以摆动的操作,通过熟练运用css我完成了对此页面的渲染,也使整个页面变得生动有趣
2070前端
当前共162069个项目
×
寻找源码
源码描述
联系方式
提交