 zzx
|
0718d233f6
|
fix(ai_seo): 移除调试打印并优化异常处理
在 kimi.py 中增加对 children 元素的异常处理，避免索引越界；在 run.py 中补充 json 模块导入，并增加调试日志输出。
|
2 weeks ago |
|
zzx
|
a307408452
|
fix(spiders/ai_seo/deepseek.py):修复AI回复内容判断逻辑
扩展了判断条件，使其能够识别更多类型的回复内容路径，包括
'response/fragments/0/content' 和原有的 'response/fragments/2/content'，
确保AI回复数据能被正确捕获和处理。
|
4 weeks ago |
|
zzx
|
adfae32f0c
|
fix(run.py):修复 answer_data 长度判断语法错误
修正了 answer_data 中 answer 字段长度判断的语法错误，原条件表达式缺少右括号，导致逻辑判断异常。此修复确保当 answer 长度小于等于
20 时能正确更新任务状态并记录错误日志。
|
4 weeks ago |
|
zzx
|
b70773fcf8
|
fix(run): 检查爬虫结果长度并更新任务状态当爬虫返回的答案数据长度小于等于20时，将任务状态更新为4（失败），并记录错误日志和回滚信息，防止无效数据提交到后续流程。
|
4 weeks ago |
|
zzx
|
e2cd6ed7ae
|
fix(spider): 添加对"好的"按钮的点击处理在Kimi爬虫中新增了对"好的"确认按钮的定位和点击逻辑，
以处理页面上可能出现的不同类型的确认对话框。
|
4 weeks ago |
|
zzx
|
6e9e4e34e1
|
fix(spider):为发布时间提取添加异常处理
当无法正确提取发布时间空时，设置默认值以避免程序中断
|
1 month ago |
|
zzx
|
f91e065d27
|
feat(ai): 更新品牌词提取任务要求
- 不再对提取的品牌词进行去重处理
- 提取文本中提到的所有品牌，包括文本总结中的品牌- 调整提示词以适应新的提取逻辑
- 修改测试入口函数名
|
1 month ago |
|
zzx
|
6dfda1086e
|
feat(spider): 更新ai_seo爬虫选择器以适配新页面结构
- 修改复制按钮的XPath选择器，使用更稳定的定位方式
- 调整来源数据获取逻辑，点击展示按钮后延时加载
- 更新来源列表项的选择器路径，并修复发布时间提取逻辑- 修改回答容器元素的选择器，确保正确获取截图区域- 添加遮罩层按钮点击操作，优化截图前的页面状态
|
1 month ago |
|
zzx
|
7abbe56259
|
feat(utils): 更新AI SEO API紧急任务数量接口路径
将获取紧急任务数量的API接口路径从
'/api/frontend/thirdParty/getUrgentTaskCount'
更新为 '/api/third/getUrgentTaskCount'
|
1 month ago |
|
zzx
|
b05b88937d
|
feat(run): 恢复紧急任务判断逻辑并移除调试代码
恢复了对紧急任务数量的判断逻辑，当任务状态无效时会检查是否存在紧急任务，
若无紧急任务则直接返回。同时移除了多余的调试注释代码，保持逻辑清晰。
|
1 month ago |
|
zzx
|
f0d251ebe5
|
fix(spider): 更新元素选择器并注释掉额度检查逻辑
- 将左侧菜单按钮的选择器从 CSS 路径更新为 XPath 路径- 注释掉对搜索额度的检查逻辑，暂时不再限制额度用完的情况
-保持原有注释结构，便于后续恢复或修改
|
1 month ago |
|
zzx
|
65a16b8b78
|
refactor(ai_seo): 更新通义灵码首页 URL
-将通义灵码的首页 URL 从 https://tongyi.aliyun.com 修改为 https://tongyi.com
- 此更新统一了通义灵码的访问入口，确保爬虫能够正确访问目标网站
|
1 month ago |
|
zzx
|
d4c34bda64
|
fix(ai_seo): 修复每日搜索额度判断逻辑
- 更新了获取每日搜索额度的 XPath 表达式
- 添加了对搜索额度为 0 的情况的处理
- 优化了代码结构，提高了可读性
|
1 month ago |
|
zzx
|
f3a7bd9539
|
feat:修复纳米盒禁用智能体问题
- 修改标题：移除标题中的"(禁用智能体)"字样
- 调整输入框定位：使用更精确的XPath定位textarea元素
-保留其他功能不变
|
1 month ago |
|
zzx
|
ac93ca5e3b
|
refactor(ai_seo): 优化一言蜘蛛的思考模式选择逻辑
- 修改思考模式按钮的定位方式，使用更准确的文本匹配
- 点击思考模式后，直接选择第二个模式选项，无需检查是否已激活
|
1 month ago |
|
zzx
|
d64013d2ec
|
refactor(ai_seo): 重构 kimi 爬虫以适应网页结构变化
- 移除长思考功能，增加确认按钮点击
- 修改输入框点击和文本输入逻辑
- 添加复制按钮点击和剪贴板读取功能- 增加搜索结果获取和解析
- 调整截图功能
|
1 month ago |
|
zzx
|
90870aaf5d
|
refactor(ai_seo): 重构 DeepSeek 爬虫
- 更新了页面元素定位方式，以适应网站结构变化
- 优化了深度思考和回答获取的逻辑
- 调整了搜索结果处理的方式
- 更新了数据返回结构的解析
|
1 month ago |
|
zzx
|
184c7ad851
|
refactor(ai_seo): 重构通义灵码爬虫
- 点击提示框确认按钮- 优化搜索结果处理逻辑- 调整 AI 回答处理方式
- 移除不必要的注释和代码
|
1 month ago |
|
zzx
|
17813ba2ae
|
feat: 添加是否启动session检查的配置
|
2 months ago |
|
zzx
|
519c1ca024
|
feat: 添加是否启动session检查的配置
|
2 months ago |
|
zzx
|
713da7a455
|
feat: 适配最新文心一言网页端
|
2 months ago |
|
zzx
|
b112005f21
|
refactor(abs_spider): 删除多余代码
|
2 months ago |
|
zzx
|
e32f27f6be
|
feat: 调整秘塔脚本元素等待时间
|
2 months ago |
|
zzx
|
5851894c65
|
feat: 新增监测session的定时任务
|
2 months ago |
|
zzx
|
11084f58ce
|
refactor: kimi脚本实现登录状态检测
|
2 months ago |
 zhurunlin
|
e8350ef7e7
|
Merge remote-tracking branch 'origin/master'
|
2 months ago |
|
zhurunlin
|
ca5097a732
|
添加获取深度思考文本
|
2 months ago |
|
zzx
|
72a5b48977
|
refactor: 所有爬虫脚本均实现do_check_login
|
3 months ago |
|
zzx
|
69ee5c70eb
|
Merge remote-tracking branch 'origin/master'
|
3 months ago |
|
zzx
|
0f0f50101e
|
feat: 更新gitignore
|
3 months ago |
|
zzx
|
b5a04c3751
|
feat: 新增秘塔ai搜索session检查功能
|
3 months ago |
|
zzx
|
e7c780c322
|
feat: 新增文心一言 session检查功能
|
3 months ago |
|
zzx
|
a2dd40d1d9
|
feat: 新增deepseek session检查功能
|
3 months ago |
|
zhurunlin
|
f8f15ad4a6
|
Merge remote-tracking branch 'origin/master'
|
3 months ago |
|
zhurunlin
|
ed296431e3
|
修改文小言请求
|
3 months ago |
|
zzx
|
8de9074a67
|
fix(ai_seo): 修复秘塔搜索xpath
|
3 months ago |
|
zhurunlin
|
098496467a
|
Merge remote-tracking branch 'origin/master'
|
3 months ago |
|
zhurunlin
|
c72c5b33e6
|
修改文小言请求
|
3 months ago |
|
zzx
|
0fc1a7ab89
|
fix(ai_seo): 修复 Kimi 和 Metaso 爬虫问题
- 在 Kimi爬虫中添加错误处理逻辑，当 API 返回错误时终止爬取
- 更新 Metaso 爬虫中的复制按钮选择器，以适应网页结构变化
|
3 months ago |
|
zzx
|
05c69b66ca
|
fix: 文心一言支持返回旧版按钮
|
3 months ago |
|
zhurunlin
|
b97fdf1215
|
过完滑块等待3秒
|
3 months ago |
|
zhurunlin
|
b54be4d5c1
|
添加计算滑块位置代码
|
3 months ago |
|
zhurunlin
|
3aa7845a5c
|
Merge remote-tracking branch 'origin/master'
|
3 months ago |
|
zhurunlin
|
23a7bceb27
|
添加过滑块
|
3 months ago |
|
zzx
|
f98c7d10f3
|
refactor(utils): 更新 API 接口路径
- 修改 oss 文件上传接口路径
- 更新保存会话接口路径
|
3 months ago |
|
zzx
|
62593d913f
|
refactor(ai_seo): 优化抓取免费搜索次数的代码- 注释掉原有的等待选择器代码
- 使用更健壮的 XPath 表达式定位免费搜索次数元素
- 提高了代码的可读性和稳定性
|
4 months ago |
|
zzx
|
7180c87dd5
|
config: 更新配置文件示例
|
4 months ago |
|
zzx
|
4152b01456
|
refactor(run): 使用配置项替代硬编码的 Chrome 渠道- 将 channel 参数从硬编码的 "chrome" 修改为使用配置项 config.BROWSER_CHANNEL
-这个改动增加了代码的灵活性和可配置性，允许在不同环境中更容易地切换浏览器渠道
|
4 months ago |
|
zzx
|
a64d39083a
|
build: 添加 requests 依赖
- 在 requirements.txt 中添加 requests 库，版本限定为 2.32.4
- 此修改确保了项目依赖的完整性和版本一致性
|
4 months ago |
|
zzx
|
dccce94a86
|
更新要忽略的文件
|
4 months ago |
