Я использую Rcrawler для сканирования вектора URL-адресов. Для большинства из них это работает хорошо, но время от времени один из них не сканируется. Сначала я замечал это только на сайтах https://, которые были адресованы здесь . Но я...

Я пытаюсь сканировать и очищать таблицы веб-сайта. У меня есть учетная запись на веб-сайте, и я обнаружил, что Rcrawl может помочь мне с получением частей таблицы на основе определенных ключевых слов и т. д. Проблема в том, что на странице GitHub нет...

У меня есть очень длинный список веб-сайтов, которые я хотел бы просмотреть на предмет title , description и keywords . Я использую ContentScraper из пакета Rcrawler , и я знаю, что он работает, но есть определенные URL-адреса, которые он не...

Я использую RCrawler для обхода примерно 300 веб-сайтов. Размер веб-сайтов довольно разнообразен: некоторые из них маленькие (десяток или около того страниц), а другие большие (1000 страниц на домен). Сканирование последнего занимает очень много...

Я хочу сравнить новостные статьи из разных стран по использованию определенного ключевого слова. Моя идея состоит в том, чтобы очистить новости Google с помощью RCrawler: RCrawler(website =...