voltwake 闲鱼监控 (xianyu-monitor)
架构
核心原理：非 headless Chrome + CDP 搜索框输入 + DOM 被动读取
闲鱼（goofish.com）有严格的反自动化检测，本工具通过以下方式绕过：
- 非 headless Chrome：headless 模式会被拦截（"非法访问"）
- AppleScript 地址栏导航：首次访问用 Cmd+L 输入 URL（
page.goto()被 baxia 拦截） - CDP Input 搜索：用
page.click(搜索框)+page.keyboard.type()+Enter搜索（产生isTrusted=true事件，前端无法区分真人） - 两步排序：点击"新发布"展开下拉菜单 → 点击"最新"选项
- DOM 被动读取：从
a[class*="feeds-item-wrap"]卡片中提取数据
登录 vs 未登录
| 状态 | 搜索结果范围 | 排序 |
|---|---|---|
| 未登录 | 只能看到 6小时以上 发布的商品 | 有限 |
| 已登录 | 可以看到 实时发布 的商品（含最近几分钟） | 完整（新发布→最新） |
⚠️ 强烈建议登录闲鱼账号，否则监控不到最新发布的商品，失去实效性。
登录方法
- 启动 Chrome：
bash scripts/setup-chrome.sh start - 在弹出的 Chrome 窗口中访问
goofish.com - 用手机扫码或短信验证码登录
- Cookie 保存在
~/.chrome-debug-xianyuprofile 中，约 7 天有效 - 过期后需重新登录（脚本会输出
COOKIE_EXPIRED提示）
登录状态检测
脚本扫描时会自动检测登录状态：
- 搜索结果中有"分钟前发布"的商品 → 已登录 ✅
- 搜索结果中最新的也是"6小时前发布" → 未登录或 cookie 过期 ⚠️
前置条件
- macOS（需要 AppleScript 控制 Chrome 地址栏）
- Chrome 非 headless 实例运行在 CDP 端口 18803（profile:
~/.chrome-debug-xianyu） puppeteer-core和better-sqlite3已安装- Chrome 需要有辅助功能权限（System Events keystroke 需要）
- 建议登录闲鱼账号（用小号，防封号风险）
启动 Chrome
bash scripts/setup-chrome.sh start # 非 headless 模式
bash scripts/setup-chrome.sh status # 检查状态
bash scripts/setup-chrome.sh stop # 停止
⚠️ Chrome 必须以非 headless 模式运行，headless 会被闲鱼拦截。
核心脚本: scripts/xianyu.js
添加监控任务
node scripts/xianyu.js add --keyword "搜索词" \
[--max-price 3000] [--min-price 500] \
[--filter "排除词1,排除词2"] \
[--only "必含词1,必含词2"] \
[--region "深圳,龙华"]
执行扫描
node scripts/xianyu.js scan [--id <task_id>] [--hours 3]
--hours N: 只返回 N 小时内发布的商品- 搜索流程：复用已有闲鱼 tab → 搜索框输入关键词 → Enter → 点击"新发布→最新" → DOM 提取
- 冷启动时自动用 AppleScript 导航到 goofish.com 建立 session
- 新商品输出在
--- NEW_ITEMS_JSON ---和--- END_NEW_ITEMS_JSON ---之间
其他命令
list— 查看所有活跃任务remove --id <N>— 停用任务history [--id <N>] [--limit 20]— 查看发现历史
建立监控流程
- 启动 Chrome：
bash scripts/setup-chrome.sh start - 首次登录：在 Chrome 窗口中访问 goofish.com，扫码登录
- 添加任务：
node scripts/xianyu.js add --keyword "iPhone 16" --max-price 5000 - 测试扫描：
node scripts/xianyu.js scan --hours 24（确认能拿到最新商品） - 创建 cron：设定扫描频率（如每小时），推送新商品到 Discord 指定频道
Cron 任务模板
闲鱼监控扫描任务。工作目录: /Users/chaos/.openclaw/workspace
## 步骤 1：确保 Chrome 运行
运行：bash skills/xianyu-monitor/scripts/setup-chrome.sh start
## 步骤 2：执行扫描
运行：node skills/xianyu-monitor/scripts/xianyu.js scan --hours 24
## 步骤 3：推送结果
解析输出中 --- NEW_ITEMS_JSON --- 和 --- END_NEW_ITEMS_JSON --- 之间的 JSON 数组。
如果有新商品，逐条用 message 工具推送：
- action=send, channel=discord, accountId=xiaov, target=<频道ID>
- 格式：
🛒 **标题**（截取前60字）
💰 ¥价格 | 📍 地区
⏰ 发布时间
🔗 https://www.goofish.com/item?id=商品ID
如果没有新商品，安静结束，不发消息。
🔴 完成后只回复一句确认（发现N条/无新商品），不贴原始数据
反爬要点
| 操作 | 结果 |
|---|---|
page.goto(searchURL) |
❌ 被 baxia 拦截，显示登录墙 |
page.click(搜索框) + type + Enter |
✅ 正常（CDP Input，isTrusted=true） |
| headless Chrome | ❌ "非法访问" |
| 非 headless Chrome | ✅ 正常 |
| AppleScript 设置 tab URL | ❌ 被拦截 |
| AppleScript Cmd+L 地址栏输入 | ✅ 正常（仅用于首次导航到首页） |
JS element.click() |
⚠️ 风险（isTrusted=false，可被检测） |
CDP page.click() |
✅ 安全（isTrusted=true，与真人点击无差别） |
数据存储
- SQLite:
data/xianyu-monitor.db - tasks 表: 监控任务配置
- items 表: 已发现商品（自动去重）
故障排查
"No element found for selector: input[class=search-input]"*
- Chrome 可能没有闲鱼 tab，或首页加载失败
- 重启 Chrome 再试（第一次建立 session，第二次正常）
只能看到 6 小时前的商品
- Cookie 过期或未登录
- 在 Chrome 窗口中重新扫码登录
搜索结果为 0
- 过滤条件太严格，用
scan不带--hours试试 - 或者所有商品已经在数据库中（正常去重）
- 过滤条件太严格，用
Chrome 进程消失
bash scripts/setup-chrome.sh status检查bash scripts/setup-chrome.sh stop && bash scripts/setup-chrome.sh start重启