jiazhizhong/MediaCrawler
1
0
Fork 0
mirror of https://github.com/NanmiCoder/MediaCrawler.git synced 2026-02-25 17:40:51 +08:00
Code Issues Packages Projects Releases Wiki Activity

docs(config): update Bilibili search mode options

Browse Source 
- Clarify the three search mode options for Bilibili
- Add note about setting MAX_NOTES_PER_DAY in bilibili config
This commit is contained in:
gaoxiaobei
2025-07-17 07:51:27 +08:00
parent 29b6cee408
commit 1dc8c1789f
2 changed files with 17 additions and 3 deletions
Download Patch File Download Diff File Expand all files Collapse all files

7
config/base_config.py
View File

@@ -223,9 +223,10 @@ START_DAY = "2024-01-01"
END_DAY = "2024-01-01"
# Bilibili 搜索模式，仅在 CRAWLER_TYPE="search" 时生效
# "normal": 不指定时间范围进行搜索，最多返回约1000条结果。
# "all_in_time_range": 在 START_DAY 和 END_DAY 指定的时间范围内，尽可能多地爬取数据，每日上限受 MAX_NOTES_PER_DAY 影响，但总数可能超过 CRAWLER_MAX_NOTES_COUNT。
# "daily_limit_in_time_range": 在指定时间范围内，严格遵守 MAX_NOTES_PER_DAY 的每日上限和 CRAWLER_MAX_NOTES_COUNT 的总上限。
# 1. "normal": 不指定时间范围进行搜索，最多返回约1000条结果。
# 2. "all_in_time_range": 在 START_DAY 和 END_DAY 指定的时间范围内，尽可能多地爬取数据，每日上限受 MAX_NOTES_PER_DAY 影响，但总数可能超过 CRAWLER_MAX_NOTES_COUNT。
# 3. "daily_limit_in_time_range": 在指定时间范围内，严格遵守 MAX_NOTES_PER_DAY 的每日上限和 CRAWLER_MAX_NOTES_COUNT 的总上限。
# 三个选项中，2. 和 3. 需在 media_platform\bilibili\config.py 中设定 MAX_NOTES_PER_DAY
BILI_SEARCH_MODE = "normal"
#!!! 下面仅支持 bilibili creator搜索

13
media_platform/bilibili/config.py Normal file
View File

@@ -0,0 +1,13 @@
# 声明：本代码仅供学习和研究目的使用。使用者应遵守以下原则：
# 1. 不得用于任何商业用途。
# 2. 使用时应遵守目标平台的使用条款和robots.txt规则。
# 3. 不得进行大规模爬取或对平台造成运营干扰。
# 4. 应合理控制请求频率，避免给目标平台带来不必要的负担。
# 5. 不得用于任何非法或不当的用途。
#
# 详细许可条款请参阅项目根目录下的LICENSE文件。
# 使用本代码即表示您同意遵守上述原则和LICENSE中的所有条款。
# 每天爬取视频/帖子的数量控制
MAX_NOTES_PER_DAY = 1