Термин
Web scraping
Автоматическое извлечение данных с веб-страниц.
Web scraping используют для сбора открытых данных со страниц. В AI-агентах важно учитывать правила доступа, нагрузку, robots.txt, условия использования и необходимость хранить ссылку на источник.