feat: ingest site videos through raw pipeline
This commit is contained in:
@@ -124,6 +124,18 @@ https://vk.com/wall-239548476_123
|
||||
}
|
||||
```
|
||||
|
||||
Если RSS отдаёт только заголовки и ссылки, можно явно дочитывать страницы записей:
|
||||
|
||||
```json
|
||||
{
|
||||
"format": "rss",
|
||||
"access": "cloudflare",
|
||||
"max_items": 20,
|
||||
"follow_links": true,
|
||||
"content_selector": "article.full"
|
||||
}
|
||||
```
|
||||
|
||||
В глобальном разделе `Site Parser` задаются URL воркера, его токен, ключ
|
||||
RuCaptcha и таймаут. Внешний модуль запускается командой:
|
||||
|
||||
|
||||
Reference in New Issue
Block a user