CoolBotDataSys/scripts
caibotmini 1c0f74ccb6 feat: v0.0.2 - 帖子正文爬取优化
- extract_post_content 新增免责声明截断逻辑:只保留到"免责声明及风险提示: 所有交易人员,凡未采用本站中介交易的,被骗后果自负。"为止
- 爬虫脚本 crawl_cron_s1/s2/s3 支持 instance_id 日志记录
- crawler_monitor.py 监控脚本:检查三台服务器爬虫运行状态
- 修复 crawl_today 日志写入 crawl_logs 表的问题
2026-04-06 16:42:43 +08:00
..
crawl_cron.sh feat: v0.0.1 - CoolBotDataSys 完整版本 2026-04-06 14:41:01 +08:00
crawl_cron_s1.sh feat: v0.0.2 - 帖子正文爬取优化 2026-04-06 16:42:43 +08:00
crawl_cron_s2.sh feat: v0.0.2 - 帖子正文爬取优化 2026-04-06 16:42:43 +08:00
crawl_cron_s3.sh feat: v0.0.2 - 帖子正文爬取优化 2026-04-06 16:42:43 +08:00
crawler_monitor.py feat: v0.0.2 - 帖子正文爬取优化 2026-04-06 16:42:43 +08:00
daily_crawl.sh feat: 完成一尘数据采集完整功能 2026-04-04 20:02:13 +08:00
daily_report.py feat: v0.0.1 - CoolBotDataSys 完整版本 2026-04-06 14:41:01 +08:00
daily_report.sh feat: 完成一尘数据采集完整功能 2026-04-04 20:02:13 +08:00