1.需要TG特定群组的历史消息供分析查看等,图片视频等附件需要对应OCR,AI识别等
2.跟踪X账户的发文等消息
点击空白处退出提示
1.需要TG特定群组的历史消息供分析查看等,图片视频等附件需要对应OCR,AI识别等
2.跟踪X账户的发文等消息
1.抓取脚本循环采集TG群组的历史消息数据(含图片视频等),要求账号有群权限,没有被封禁等
2.python脚本抓取X账户的发文回复等消息,时效性看要求,以及账户信息等
TG使用telethon,X使用twscrape 实现社媒数据的稳定抓取,总体python实现,数据也通过kafka直接接入clickhouse,doris等存储引擎



评论