● 项目概述：TDIP数据集成平台是用来在数据源之间高效同步数据、数据清洗、管理元数据信息以及数据开放的数据仓库平台。● 使用技术：Java 8、Spring Boot 2.1、Flume 1.8、Druid 1.1、Kafuka 1.1、Atlas 1.0等。● 项目架构：采用分布式架构，分为rest模块和server模块。rest模块为可视化界面提供http接口，通过界面可以在配置数据源、创建数据同步任务、查看元数据信息和自定义数据过滤器等。server模块处理支持集群化部署，负责数据的采集、清洗和存储等。● 项目收获：1. 通过在项目中的实践，熟悉了Spring Boot的使用，对分布式系统有了比较深入的理解。2. 对大数据组件如Flume、Kafuka等有了一定的认识，能够满足日常的使用，对数据仓库有了一定的理解。3. 认识了图数据库如Atlas、Neo4j等，能够熟练的使用图数据库熟练。