程序员阿江(Relakkes)
|
5294b6d9b7
|
feat: 支持连接用户已有的 Chrome 浏览器进行爬取
新增 CDP_CONNECT_EXISTING 配置项,默认开启,通过 Chrome 远程调试功能
(chrome://inspect/#remote-debugging) 直接连接用户正在使用的浏览器,
复用真实的 Cookie、扩展和浏览历史,大幅降低平台风控检测风险。
主要变更:
- 新增 _connect_existing_browser 方法,通过 ws:// 直接连接已有浏览器
- 支持等待用户在浏览器端确认连接对话框(60秒超时)
- cleanup 时不关闭用户的浏览器进程
- 修复小红书在真实浏览器下 cookie 过多导致签名失败的问题
- 更新 README、CDP使用指南和常见问题文档
|
2026-04-15 10:54:29 +08:00 |
|
Doiiars
|
70a6ca55bb
|
feat(database): add PostgreSQL support and fix Windows subprocess encoding
|
2026-01-09 00:41:59 +08:00 |
|
程序员阿江(Relakkes)
|
b9663c6a6d
|
fix: #798
|
2025-12-22 17:44:35 +08:00 |
|
程序员阿江(Relakkes)
|
9ade3b3eef
|
chore: use playwright sign xhs and update dependency
|
2025-12-09 14:47:48 +08:00 |
|
程序员阿江(Relakkes)
|
6e858c1a00
|
feat: excel store with other platform
|
2025-11-28 15:12:36 +08:00 |
|
程序员阿江(Relakkes)
|
ff8c92daad
|
chore: add copyright to every file
|
2025-11-18 12:24:02 +08:00 |
|
程序员阿江(Relakkes)
|
b5dab6d1e8
|
refactor: 使用 xhshow 替代 playwright 签名方案
感谢 @Cloxl/xhshow 开源项目
🤖 Generated with [Claude Code](https://claude.com/claude-code)
Co-Authored-By: Claude <noreply@anthropic.com>
|
2025-11-10 18:12:45 +08:00 |
|
yt210
|
ef6948b305
|
新增存储到mongoDB
|
2025-11-06 10:40:30 +08:00 |
|
程序员阿江(Relakkes)
|
84f6f650f8
|
fix: typer args bugfix
|
2025-09-26 18:07:57 +08:00 |
|
persist-1
|
b04f5bcd6f
|
feat(database): 优化数据库模型和连接管理
- 添加cryptography依赖用于加密功能
- 重构数据库模型字段类型和约束
- 增加数据库自动创建功能
- 改进数据库连接管理和错误处理
- 更新相关依赖文件(pyproject.toml, requirements.txt)
|
2025-09-06 06:08:28 +08:00 |
|
persist-1
|
be306c6f54
|
refactor(database): 重构数据库存储实现,使用SQLAlchemy ORM替代原始SQL操作
- 删除旧的async_db.py和async_sqlite_db.py实现
- 新增SQLAlchemy ORM模型和数据库会话管理
- 统一各平台存储实现到_store_impl.py文件
- 添加数据库初始化功能支持
- 更新.gitignore和pyproject.toml依赖配置
- 优化文件存储路径和命名规范
|
2025-09-06 04:10:20 +08:00 |
|
程序员阿江(Relakkes)
|
6b6fedd031
|
fix: #711
|
2025-09-02 18:57:18 +08:00 |
|
程序员阿江(Relakkes)
|
eb799e1fa7
|
refactor: xhs extractor
|
2025-09-02 14:50:32 +08:00 |
|
程序员阿江(Relakkes)
|
12450759d8
|
fix: httpx proxy format error
feat: add a ip proxy provider
|
2025-08-01 01:05:11 +08:00 |
|
买定不离手
|
c6b96b7e28
|
chore: 更新项目依赖锁定文件\n\n- 更新 uv.lock: 同步项目依赖版本
|
2025-07-14 03:37:10 +08:00 |
|
Lei Cao
|
eb03a4f68d
|
Update playwright version to support Ubuntu 24.04
|
2025-07-05 21:17:52 +00:00 |
|
程序员阿江(Relakkes)
|
c892c3324c
|
chore: update uv lock file use aliyun pypi
|
2025-07-03 16:07:07 +08:00 |
|
Relakkes
|
daaea7155b
|
feat: add uv tool to manage project
|
2025-03-23 18:13:13 +08:00 |
|