Excel多源数据清洗与自动汇总系统产品系统Vibe Coding

在企业办公、科研数据整理和日常统计工作中，不同来源的数据通常分别保存在多个Excel或CSV文件中，容易出现字段名称不一致、重复记录、缺失值、日期格式混乱等问题。传统方式需要人工逐个复制、核对和整理，不仅耗时，而且容易发生遗漏。本项目用于批量导入、清洗、合并和检查多来源表格数据，提高重复性数据整理工作的效率和准确性。

系统支持批量上传Excel和CSV文件，并展示文件名称、工作表、数据行数、字段名称等基本信息。用户可以选择需要合并的文件和工作表，设置字段映射，将“姓名”“人员姓名”等不同名称的字段统一处理。系统提供完全重复行删除、指定字段去重、缺失值检查、日期格式统一、数字格式清理、文本空格处理和数据排序等功能。处理完成后可以预览清洗结果，并导出包含清洗数据、异常记录、数据质量汇总和处理日志的Excel文件。

本项目使用Python开发，采用Streamlit构建可视化操作界面，Pandas负责Excel和CSV数据的读取、合并、筛选及清洗，OpenPyXL负责生成包含多个工作表的Excel结果文件。项目将文件读取、字段映射、数据检查、清洗处理和结果导出划分为独立模块，并针对文件为空、字段缺失、格式错误、文件占用和重复数据等情况增加异常提示。项目提供示例数据、依赖配置和启动脚本，可在Windows环境中本地运行，并使用Pytest对主要数据处理功能进行测试。