interlark
Ошибка ERR_CONNECTION_CLOSED
Во время работы получена ошибка . После нее парсер остановился. Получена ошибка при попытке запустить парсер очередной ссылки. Посути понятно откуда она растет . Это либо блокировка IP либо проблемы с инетом. Но желательно обрабатывать ошибку и перезапускать парсер ссылки .
22:31:02.141 | Ошибка во время работы парсера. Traceback (most recent call last): File "parser_2gis\gui\app.py", line 83, in run File "parser_2gis\parser\parser.py", line 138, in parse_url File "parser_2gis\chrome\remote.py", line 233, in navigate parser_2gis.chrome.exceptions.ChromeException: net::ERR_CONNECTION_CLOSED
Насполько я понимаю, такая ошибка в браузере может произойти когда он пытается открыть интернет ресурс, но не может из-за проблем с интрнет-подключением.
Можно попробовать сделать "Сброс сетевых параметров" или прописать "Авто DNS" как это описано тут.
Можно, конечно, отлавливать ошибки браузера парсером и пытаться снова его запустить, но изначальной проблемы с подключением это не решит.
Как вариант можно добавить опцию перезапуска браузера при возникновении подобной ошибки, будет полезна если такие ошибки имеют стохастический характер.
Запустил в два потока парсер. Один выпал с такой ошибкой второй норм дальше работал . Что то там еще может влиять . Возможно и был кратковременный скачек инета . Очень хорошо проявляется если парсить магазины Алматы . 353 рубрика если правильно помню . Три раза подряд ловил ошибку .