AI金融投顾平台,需要海量的数据来支撑.
可以说高质量、高实效性的数据是平台服务质量的基石.
用一个相对通用的平台来搜集、清洗数据迫在眉睫.
点击空白处退出提示
Airflow 数据采集、清洗、增强、入向量库产品系统Vibe Coding
我要开发同款技术信息
作品详情
行业场景
功能介绍
把比如新闻,专家访谈,收费数据源等数据, 进行清洗、 并用LLM识别ticker,行业等增强属性, 最后入向量库.
作为AI 金融投顾平台基础知识库, 支撑行情分析,走势判断等功能.
项目实现
我负责整体airflow技术栈的搭建, 把搜集、清洗、增强、入向量库抽象通用工作流, 给出模版代码.
然后团队分工合作,实现对各种数据来源的数据的处理.
示例图片
声明：本文仅代表作者观点，不代表本站立场。如果侵犯到您的合法权益，请联系我们删除侵权资源！如果遇到资源链接失效，请您通过评论或工单的方式通知管理员。未经允许，不得转载，本站所有资源文章禁止商业使用运营!
评论