SQLite

系统支持配置目标网站、商品链接、采集字段和执行周期，可自动完成列表翻页、商品详情解析及动态页面数据获取。主要功能包括定时采集、任务启停、失败重试、访问限速、数据去重、价格历史记录、库存变化记录、运行日志和异常告警。采集结果可导出为Excel、CSV和JSON，也可保存至MySQL数据库，并通过Fas

多源定时采集：每日自动抓取GitHubTrending、B站热门、ProductHunt、AIBase等5大渠道AI语义分析：DeepSeek对每条情报进行技术价值评分，提取关键标签结构化报告：自动生成包含项目评分、技术栈、开源协议、热度的Markdown日报RAG知识库：高质量情报自动归档，支持跨

本项目分为浏览器自动化模块、页面数据解析模块、分页采集模块、本地存储模块、运行日志五大独立模块，整体采用高内聚低耦合分层设计。依托Playwright模拟浏览器点击操作自动翻页，加载完整渲染页面获取HTML数据；内置访问延时规避网站反爬，自带断点续爬机制，程序中断重启后可从上次采集位置继续运行；自动

本项目分为网络请求模块、静态页面解析模块、分页循环采集模块、本地存储模块、运行日志五大独立模块，整体采用高内聚低耦合分层设计。工具内置请求间隔延时逻辑规避网站反爬，自动分页抓取图书书名、作者、售价、封面链接、内容简介等静态字段；采集数据仅支持CSV表格与SQLite数据库两种存储格式，同时自动缓存列

本项目分为网络请求模块、Token自动提取解析模块、分页JSON数据解析模块、本地多格式存储模块、运行日志模块五大核心模块。工具可自动请求目标页面提取鉴权Token，循环分页抓取产品ID、名称、详情链接、产品图片链接等字段，自动将采集数据导出CSV、XLSX、SQLite数据库文件；全程输出标准化运

数据采集模块：自动翻页采集（10页250条），支持请求间隔配置与异常跳过，内置User-Agent伪装与反爬处理。Web管理模块：浏览器端实时查看数据，支持评分滑块筛选、电影名搜索、排序与分页。数据可视化模块：评分分布柱状图、TOP5高分排行、统计卡片（总数/均分/总评价人数）。导出模块：一键下载E

批量文件处理工具套件是一款面向电商卖家、设计师、自媒体创作者、办公白领的桌面效率工具，包含五大核心模块：【图片处理工具】-批量压缩：自定义质量，大图秒变小图-批量加水印：自定义文字、位置、颜色，防盗必备-批量调整尺寸：按比例缩放或指定尺寸-批量格式转换：PNG/JPG/WEBP/BMP/TIFF互转

1、项目管理2、电表管理3、采集器管理4、用电量数据导出5、客户管理智能电表、采集器选择http://doc-api.tqdianbiao.com/#/home/welcome