项目描述:
为了打破企业数据孤岛,窜连融合企业资产数据,实现企业级公共计算逻辑下沉,实现公司应用资产的数据能力变现,赋能整个移动应用安全领域业务,构建了涵盖应用加固体系数据;应用源码漏洞、病毒、正盗版、仿冒风险体系数据;应用隐私合规风险体系数据;应用内容合规体系数据;应用资产体系数据等五大体系数据;涵盖Android、iOS、公众号、小程序、H5、SDK、IOT固件、鸿蒙应用等应用资产。实现全国全行业全区域应用风险监控,智能风险告警等,输出全区域全行业资产态势分析报告。
工作内容:
1.架构设计
数据底层处理和存储采用Lambda技术架构,上层应用平台采用微服务技术架构,整体设计方法论采用DDD领域驱动设计和4+1架构视图设计。
2.海量数据存储方案
MongoDB+HDFS+HBase
MongoDB主从副本集群搭建;
Hadoop集群搭建,Hadoop调优;
HBase集群搭建,HBase调优;
3.海量数据搜索方案
ElasticSearch集群搭建;
ElasticSearch 索引优化,读写性能优化;
ElasticSeatch 跨主题域搜索,全域搜索,冷热数据分离方案;
4