persist-1
|
0d0af57a01
|
fix(store): 修复'crawler_type_var'的不当使用导致csv/json保存文件名异常的bug
|
2025-09-10 23:47:05 +08:00 |
|
persist-1
|
e92c6130e1
|
fix(store): 修复存储实现的AsyncFileWriter导入
重构小红书存储实现，将store_comments方法改为处理单个评论的store_comment
为多个平台添加AsyncFileWriter工具类导入
|
2025-09-06 04:41:37 +08:00 |
|
persist-1
|
be306c6f54
|
refactor(database): 重构数据库存储实现，使用SQLAlchemy ORM替代原始SQL操作
- 删除旧的async_db.py和async_sqlite_db.py实现
- 新增SQLAlchemy ORM模型和数据库会话管理
- 统一各平台存储实现到_store_impl.py文件
- 添加数据库初始化功能支持
- 更新.gitignore和pyproject.toml依赖配置
- 优化文件存储路径和命名规范
|
2025-09-06 04:10:20 +08:00 |
|
买定不离手
|
1298022410
|
refactor: 更新各平台store模块初始化以支持SQLite
- 更新 store/bilibili/__init__.py 文件，导入SQLite存储实现类和相关模块
- 更新 store/douyin/__init__.py 文件，集成抖音平台的SQLite数据存储接口
- 更新 store/kuaishou/__init__.py 文件，添加快手平台SQLite存储模块的导入声明
- 更新 store/tieba/__init__.py 文件，引入贴吧平台SQLite数据库操作模块
- 更新 store/weibo/__init__.py 文件，整合微博平台SQLite存储功能模块
- 更新 store/xhs/__init__.py 文件，导入小红书平台SQLite数据存储实现
- 更新 store/zhihu/__init__.py 文件，集成知乎平台SQLite数据库存储模块
|
2025-07-14 03:51:08 +08:00 |
|
买定不离手
|
6f274d476b
|
feat: 添加各平台SQLite存储实现文件\n\n- 新增 store/bilibili/bilibili_store_impl.py: B站SQLite存储实现\n- 新增 store/douyin/douyin_store_impl.py: 抖音SQLite存储实现\n- 新增 store/kuaishou/kuaishou_store_impl.py: 快手SQLite存储实现\n- 新增 store/tieba/tieba_store_impl.py: 贴吧SQLite存储实现\n- 新增 store/weibo/weibo_store_impl.py: 微博SQLite存储实现\n- 新增 store/xhs/xhs_store_impl.py: 小红书SQLite存储实现\n- 新增 store/zhihu/zhihu_store_impl.py: 知乎SQLite存储实现
|
2025-07-14 03:36:36 +08:00 |
|
买定不离手
|
fb938f38aa
|
feat: 更新各平台store SQL文件以支持SQLite\n\n- 更新 store/kuaishou/kuaishou_store_sql.py: 快手平台SQLite适配\n- 更新 store/tieba/tieba_store_sql.py: 贴吧平台SQLite适配\n- 更新 store/weibo/weibo_store_sql.py: 微博平台SQLite适配\n- 更新 store/xhs/xhs_store_sql.py: 小红书平台SQLite适配\n- 更新 store/zhihu/zhihu_store_sql.py: 知乎平台SQLite适配
|
2025-07-14 03:36:20 +08:00 |
|
Bowenwin
|
703a6e84cb
|
fix_words
|
2025-05-19 20:07:20 +08:00 |
|
Relakkes
|
9fe3e47b0f
|
chore: 增加代码学习声明，严格禁止非法、禁止商业、不当用途
|
2024-10-20 00:43:25 +08:00 |
|
Relakkes Yang
|
acb29add28
|
feat: 百度贴吧支持创作者主页帖子爬取
|
2024-08-24 11:03:23 +08:00 |
|
Relakkes
|
8adb593ba6
|
temp commit
|
2024-08-24 09:12:03 +08:00 |
|
Relakkes
|
c70bd9e071
|
feat: 增加搜索词来源渠道
|
2024-08-23 08:29:24 +08:00 |
|
Relakkes
|
3f42368c02
|
feat: 百度贴吧done
|
2024-08-08 14:19:32 +08:00 |
|
Relakkes
|
026d81e131
|
feat: 百度贴吧一级评论done
|
2024-08-07 02:34:56 +08:00 |
|
Relakkes
|
3c98808409
|
feat: 贴吧搜索重构
|
2024-08-07 01:01:21 +08:00 |
|
Relakkes
|
d347cf5a2c
|
feat: 帖子搜索 & 移除登录代码使用IP代理
|
2024-08-06 03:37:55 +08:00 |
|
Relakkes
|
a87094f2fd
|
feat: 百度贴吧架子 & 登录done
|
2024-08-05 18:51:51 +08:00 |
|