主要模块爬虫服务:采集微博、头条、最右等站点文章审核服务:对采集语料进行人工审核,选择优质的语料发布到PGC平台定时任务服务:界面化管理后台定期任务技术栈:Java、Python、Vue、Uniapp、MySQL难点:分布式爬虫调度Elasticsearch内容搜索自动发布内容任务
评论