undetected-chromedriver и nodriver, что они исправляют и где останавливаются
Вы перевели скрапер на Selenium на undetected-chromedriver, потому что сайт постоянно ловил ChromeDriver, и это сработало. Через несколько месяцев, когда аккаунтов на той же машине стало больше, пометки вернулись, и переход на nodriver ничего не изменил. Ничего не сломалось. Вы упёрлись в границу того, для чего оба проекта создавались.
Что меняет undetected-chromedriver
undetected-chromedriver описывает себя как оптимизированный патч для Selenium Chromedriver, который сам скачивает бинарник драйвера и патчит его. Цель - процесс драйвера, тот самый, что внедряет узнаваемые объекты в каждую управляемую страницу. В README отмечено, что подход сменился: раньше эти переменные удаляли и переименовывали, теперь их просто не дают внедрить.
Практическая ценность в том, что код остаётся на Selenium. uc.Chrome() возвращает WebDriver, локаторы, ожидания и page objects продолжают работать, а правка занимает несколько строк. Для кодовой базы на Selenium это самый дешёвый способ убрать признак на уровне драйвера.
README так же прямо говорит об ограничениях. Там заглавными буквами написано, что пакет не скрывает ваш IP-адрес, что из дата-центра вы, скорее всего, не пройдёте, и что режим headless официально не поддерживается.
Что меняет nodriver
nodriver заявлен как официальный преемник. Он не патчит драйвер, а убирает его: ни бинарника chromedriver, ни зависимости от Selenium, библиотека общается с Chrome напрямую по протоколу DevTools. Она полностью асинхронная, так что переход на неё - переписывание, а не замена импорта. Заявленная цель - оставаться незамеченным для большинства антибот-решений, и большего проект не обещает.
Для работы с аккаунтами в README важны две детали. По умолчанию nodriver на каждом запуске создаёт свежий профиль и удаляет его при выходе, так что cookie и хранилище пропадают, если не указать собственный каталог профиля. А режим expert, ослабляющий веб-безопасность, по словам самого README делает вас заметнее.
Общая граница
Оба проекта отвечают на один вопрос: управляет ли этим браузером автоматизация? Они убирают улики, которые говорят «да». Следующий вопрос антифрод-системы - какое это устройство - они не трогают.
Вывод canvas, строки рендерера WebGL, установленные шрифты, обработка аудио, параметры экрана и железа берутся с реальной машины и реальной установки Chrome. Патч драйвера их не меняет. Отсюда:
- Десять профилей на одном ноутбуке показывают одно устройство. Разные cookie, одинаковые canvas и WebGL. Такое легко кластеризовать, и именно это ищут платформы, которые связывают аккаунты.
- Прокси в другой стране меняет IP, но
Intl.DateTimeFormat().resolvedOptions().timeZoneиnavigator.languageпо-прежнему показывают настройки машины. Ни в одном из двух README не описано, как согласовать их с выходным IP. - Обновление Chrome меняет отпечаток хоста сразу для всех профилей, в тот же день.
Это не упрёк. Убрать признак автоматизации - реальный и нужный шаг, и эти проекты делают его бесплатно. Идентичность устройства - другая задача, которую они и не брались решать.
Когда их достаточно
Они - правильный ответ, и переход будет лишней работой, если:
- у вас одна личность или несколько, которые не обязаны выглядеть несвязанными;
- трафик идёт через чистое резидентное или домашнее подключение;
- сайт проверяет автоматизацию, а не согласованность устройства между аккаунтами;
- у вас кодовая база на Selenium (undetected-chromedriver) или вы начинаете с нуля на асинхронном Python (nodriver) и не хотите платной зависимости.
Если это про вас, оставайтесь на текущем инструменте и вложите силы в качество прокси и темп работы.
Когда нужно что-то другое
Переходить стоит, когда несколько аккаунтов на одной машине не должны делить одно устройство, когда профиль должен переживать перезапуски и обновления Chrome с той же идентичностью, или когда прокси, часовой пояс и локаль должны совпадать без самописной обвязки.
AntiBrow генерирует отпечаток один раз на профиль, применяет его в движке браузера ниже уровня JS и сохраняет вместе с профилем. Привязка прокси к профилю подстраивает часовой пояс, локаль и геолокацию под выходной IP, а профили - это каталоги на вашем диске, без ограничения числа на любом тарифе, включая Free.
Цена перехода реальна. launch() возвращает Playwright Page и BrowserContext, а не WebDriver из Selenium и не вкладку nodriver. С undetected-chromedriver придётся переписать локаторы, ожидания и настройку Grid, если она есть. С nodriver придётся переложить его асинхронный API на API Playwright: это ближе, но всё равно переписывание. Сами утечки на уровне драйвера разобраны в статье про утечки Selenium; здесь речь о том, что остаётся после их устранения.
Проверьте, какая у вас проблема
- Откройте три профиля текущим инструментом на одной машине. В каждом загрузите тест canvas, например описанный здесь, и сравните хеши. Одинаковые хеши значат, что ваши аккаунты делят одно устройство.
- В каждом сравните
Intl.DateTimeFormat().resolvedOptions().timeZoneс местоположением выходного IP. - Прочитайте
navigator.webdriverв консоли. Если тамfalse, а шаги 1 и 2 чистые, проблема не в автоматизации и не в идентичности. Смотрите дальше на репутацию IP и поведение. - Если шаг 1 провален, никакой патч драйвера это не исправит. Проведите ту же проверку на одном бесплатном профиле AntiBrow по документации SDK.
Попробуйте на бесплатном тарифе.
Неограниченное число локальных профилей, без карты. Проверьте результат детекторами сами.