spdk中对于数据的写入需要4K对齐，而且对写数据的性能也达不到写PMEM的性能，所以通过自研的磁盘提供的一块高速存储空间，来实现high speed journal开发，通过journal的使用来解决spdk接管磁盘之后不能达到的痛点，由于具体实现涉及到公司的机密，不能将大概的具体实现逻辑，大概就是通过磁盘提供的这块存储空间作为数据临时存储位置，然后内部线程将该空间的数据通过spdk中的内部接口搬迁到磁盘中

分布式块存储管理系统大概模块有节点管理，磁盘管理，集群管理，节点池管理，存储池管理，卷管理等模块，使用springboot框架，后端数据库使用mysql数据库搭建出集群模式，对于节点信息的采集服务状态的监控等，是设计了一个新的agent模块，后端直接向agent通信，然后agent将收集到的信息返回给上蹭，并且agent负责节点所需服务的自动安装部署 项目是从零开始作为主要负责人与开发人进行开发完成，项目中70%属于个人独立完成，除前端之外，后台所涉及的Java、python、shell脚本等都是一个人开发完成

对HDFS中namenode、datanode两大模块进行适配，对原生hadoop中的这两个模块进行适配重构，对于namenode模块，将原生hadoop元数据处理流程都进行重写，直接对接分布式文件系统创建出来的文件，所以namenode将不会存在复杂的元数据记录文件，对于datanode，修改之前写数据的方式，直接将数据写到对应的分布式文件系统中 系统难点在于处理原生hadoop中权限控制、token处理等问题，而且原生hadoop之上会有很多上层应用，要适配这些应用都可以正常使用，有较大的难度