增强 agent-browser 反爬虫支持

- 自动设置 AGENT_BROWSER_SOCKET_DIR 环境变量
- 添加真实 User-Agent 绕过反爬虫检测
- 增加 403 错误检测和提示
- 解决 techpowerup.com 等网站拦截问题
This commit is contained in:
2026-07-05 00:19:18 +08:00
parent ccb8479242
commit 6b7e856e38
2 changed files with 55 additions and 1 deletions

43
PROJECT_SUMMARY.md Normal file
View File

@@ -0,0 +1,43 @@
# Web Capture API 项目
## 待推送信息
- **仓库地址**: http://121.40.164.32:12007/hz4th_coder/web-capture-api.git
- **当前版本**: v1.0.2
- **提交历史**:
- v1.0.0: 初始化项目
- v1.0.1: 修改端口为 16025
- v1.0.2: 修复 agent-browser socket 权限问题
## 操作步骤
### 1. 在 Git 平台创建仓库
请大爷登录 Git 平台 (http://121.40.164.32:12007) 并创建仓库:
- 仓库名称: `web-capture-api`
- 所属用户: `hz4th_coder`
- 可见性: 公开或私有(根据需要)
### 2. 推送代码
仓库创建后,运行以下命令:
```bash
cd /home/openclaw/.openclaw/workspace-hz4th_coder/works/web-capture-api
git push -u origin master --tags
```
## 项目功能
- 网页截图(全页或视口)
- HTML 代码提取
- 自动滚动加载动态内容
- 自定义视口大小
- Web 界面和 RESTful API
- 支持 agent-browser 和 Playwright 双后端
- Docker 部署支持
## 服务地址
- Web 界面: http://192.168.0.101:16025
- API 接口: http://192.168.0.101:16025/api/capture