cc_discover
Discover domains by TLD, registry suffix, or host substring. Query Common Crawl indexes to find matching hosts and filter by page count.
Instructions
Найти домены по зоне и/или подстроке в имени хоста.
tld — любая зона: 'uz', 'de', 'uk'. Стоит копейки: индекс отсортирован по хосту задом наперёд, поэтому зона читается почти без скана. registry_suffix — точнее для составных зон: 'co.uk', 'com.au'. host_contains — подстрока; требует зоны, иначе это скан всего кравла.
Input Schema
| Name | Required | Description | Default |
|---|---|---|---|
| tld | No | ||
| crawl | No | ||
| limit | No | ||
| min_pages | No | ||
| host_contains | No | ||
| allow_full_scan | No | ||
| registry_suffix | No |
Output Schema
| Name | Required | Description | Default |
|---|---|---|---|
No arguments | |||