 zzx
|
1f110c160c
|
feat(ai_seo): 支持 datetime 类型的 publish_time 字段并优化工作流爬虫集成
- 在 `AiAnswer` 数据类中扩展 `publish_time` 类型，支持传入 `datetime` 实例，并自动格式化为字符串- 新增 `WorkFlowApiSpider` 爬虫类，用于通过 API 方式获取工作流平台的 AI 回复结果
- 更新 `main.py` 和 `run.py`，注册并调用工作流爬虫逻辑
- 添加定时任务调度逻辑以支持工作流平台的任务执行
- 支持根据平台 ID 动态判断使用传统爬虫或工作流 API 爬虫- 增加对短结果、空结果的异常处理及任务状态回滚机制- 浏览器初始化逻辑优化，仅在需要时启动浏览器实例
|
2 weeks ago |
|
zzx
|
212874fda6
|
fix(spiders/ai_seo/kimi.py): 增加等待时间并处理取消按钮
|
2 weeks ago |
|
zzx
|
0718d233f6
|
fix(ai_seo): 移除调试打印并优化异常处理
在 kimi.py 中增加对 children 元素的异常处理，避免索引越界；在 run.py 中补充 json 模块导入，并增加调试日志输出。
|
2 weeks ago |
|
zzx
|
a307408452
|
fix(spiders/ai_seo/deepseek.py):修复AI回复内容判断逻辑
扩展了判断条件，使其能够识别更多类型的回复内容路径，包括
'response/fragments/0/content' 和原有的 'response/fragments/2/content'，
确保AI回复数据能被正确捕获和处理。
|
4 weeks ago |
|
zzx
|
e2cd6ed7ae
|
fix(spider): 添加对"好的"按钮的点击处理在Kimi爬虫中新增了对"好的"确认按钮的定位和点击逻辑，
以处理页面上可能出现的不同类型的确认对话框。
|
4 weeks ago |
|
zzx
|
6e9e4e34e1
|
fix(spider):为发布时间提取添加异常处理
当无法正确提取发布时间空时，设置默认值以避免程序中断
|
1 month ago |
|
zzx
|
6dfda1086e
|
feat(spider): 更新ai_seo爬虫选择器以适配新页面结构
- 修改复制按钮的XPath选择器，使用更稳定的定位方式
- 调整来源数据获取逻辑，点击展示按钮后延时加载
- 更新来源列表项的选择器路径，并修复发布时间提取逻辑- 修改回答容器元素的选择器，确保正确获取截图区域- 添加遮罩层按钮点击操作，优化截图前的页面状态
|
1 month ago |
|
zzx
|
f0d251ebe5
|
fix(spider): 更新元素选择器并注释掉额度检查逻辑
- 将左侧菜单按钮的选择器从 CSS 路径更新为 XPath 路径- 注释掉对搜索额度的检查逻辑，暂时不再限制额度用完的情况
-保持原有注释结构，便于后续恢复或修改
|
1 month ago |
|
zzx
|
65a16b8b78
|
refactor(ai_seo): 更新通义灵码首页 URL
-将通义灵码的首页 URL 从 https://tongyi.aliyun.com 修改为 https://tongyi.com
- 此更新统一了通义灵码的访问入口，确保爬虫能够正确访问目标网站
|
1 month ago |
|
zzx
|
d4c34bda64
|
fix(ai_seo): 修复每日搜索额度判断逻辑
- 更新了获取每日搜索额度的 XPath 表达式
- 添加了对搜索额度为 0 的情况的处理
- 优化了代码结构，提高了可读性
|
1 month ago |
|
zzx
|
f3a7bd9539
|
feat:修复纳米盒禁用智能体问题
- 修改标题：移除标题中的"(禁用智能体)"字样
- 调整输入框定位：使用更精确的XPath定位textarea元素
-保留其他功能不变
|
1 month ago |
|
zzx
|
ac93ca5e3b
|
refactor(ai_seo): 优化一言蜘蛛的思考模式选择逻辑
- 修改思考模式按钮的定位方式，使用更准确的文本匹配
- 点击思考模式后，直接选择第二个模式选项，无需检查是否已激活
|
1 month ago |
|
zzx
|
d64013d2ec
|
refactor(ai_seo): 重构 kimi 爬虫以适应网页结构变化
- 移除长思考功能，增加确认按钮点击
- 修改输入框点击和文本输入逻辑
- 添加复制按钮点击和剪贴板读取功能- 增加搜索结果获取和解析
- 调整截图功能
|
1 month ago |
|
zzx
|
90870aaf5d
|
refactor(ai_seo): 重构 DeepSeek 爬虫
- 更新了页面元素定位方式，以适应网站结构变化
- 优化了深度思考和回答获取的逻辑
- 调整了搜索结果处理的方式
- 更新了数据返回结构的解析
|
1 month ago |
|
zzx
|
184c7ad851
|
refactor(ai_seo): 重构通义灵码爬虫
- 点击提示框确认按钮- 优化搜索结果处理逻辑- 调整 AI 回答处理方式
- 移除不必要的注释和代码
|
1 month ago |
|
zzx
|
713da7a455
|
feat: 适配最新文心一言网页端
|
2 months ago |
|
zzx
|
e32f27f6be
|
feat: 调整秘塔脚本元素等待时间
|
2 months ago |
|
zzx
|
11084f58ce
|
refactor: kimi脚本实现登录状态检测
|
2 months ago |
 zhurunlin
|
ca5097a732
|
添加获取深度思考文本
|
2 months ago |
|
zzx
|
72a5b48977
|
refactor: 所有爬虫脚本均实现do_check_login
|
3 months ago |
|
zzx
|
b5a04c3751
|
feat: 新增秘塔ai搜索session检查功能
|
3 months ago |
|
zzx
|
e7c780c322
|
feat: 新增文心一言 session检查功能
|
3 months ago |
|
zzx
|
a2dd40d1d9
|
feat: 新增deepseek session检查功能
|
3 months ago |
|
zhurunlin
|
ed296431e3
|
修改文小言请求
|
3 months ago |
|
zzx
|
8de9074a67
|
fix(ai_seo): 修复秘塔搜索xpath
|
3 months ago |
|
zhurunlin
|
c72c5b33e6
|
修改文小言请求
|
3 months ago |
|
zzx
|
0fc1a7ab89
|
fix(ai_seo): 修复 Kimi 和 Metaso 爬虫问题
- 在 Kimi爬虫中添加错误处理逻辑，当 API 返回错误时终止爬取
- 更新 Metaso 爬虫中的复制按钮选择器，以适应网页结构变化
|
3 months ago |
|
zzx
|
05c69b66ca
|
fix: 文心一言支持返回旧版按钮
|
3 months ago |
|
zhurunlin
|
b97fdf1215
|
过完滑块等待3秒
|
3 months ago |
|
zhurunlin
|
23a7bceb27
|
添加过滑块
|
3 months ago |
|
zzx
|
62593d913f
|
refactor(ai_seo): 优化抓取免费搜索次数的代码- 注释掉原有的等待选择器代码
- 使用更健壮的 XPath 表达式定位免费搜索次数元素
- 提高了代码的可读性和稳定性
|
4 months ago |
|
zhurunlin
|
e1df39d494
|
调整nano 截图
|
4 months ago |
|
zhurunlin
|
6e7062e097
|
适配nano
|
4 months ago |
|
zhurunlin
|
ecb28ad9fe
|
检查秘塔session每日额度是否用完
|
4 months ago |
|
zzx
|
10922ec1d2
|
修复元宝和文心一言平台截图问题
|
4 months ago |
|
zhurunlin
|
9e995d0fcb
|
修改秘塔开启深度思考，新增文小言采集
|
4 months ago |
|
zhurunlin
|
363e1e50af
|
修改metao定位复制按钮
|
4 months ago |
|
zhurunlin
|
0d9d5743a5
|
修改metao定位复制按钮
|
4 months ago |
|
zhurunlin
|
351b043dea
|
修改doubao,yuanbao链接是否被引用代码
|
4 months ago |
|
zhurunlin
|
23ed8ecb56
|
提交deepseek链接是否被引用代码
|
4 months ago |
|
zhurunlin
|
87be344876
|
更新通义改版后body为空的异常
|
4 months ago |
|
zhurunlin
|
e805cf0c84
|
修改seo并发数为1,修复豆包解析报错
|
4 months ago |
|
zhurunlin
|
2d51402f2d
|
上传工程代码
|
4 months ago |
