Решение ReCaptca с Датакол
Ранее я уже писал, как можно в ручном режиме решить рекапчу от Гугл в Датакол. Но вскоре встроенный браузер Datacol перестал с ней справляться и…
Импорт в базу данных MYSQL
Рассмотрим импорт данных с помощью Datacol напрямую в базу данных MYSQL, типы данных и создание таблицы.
Мобильный user-agent
Иногда нужно парсить данные с мобильной версии сайта. Сайт сам определяет, с какого устройства на него зашли. Зачастую сайт определяет по user-agent браузера. У мобильных…
Работа со строками в полях с динамическим плагином. Часть 1
Иногда нужно совершить некоторые действия со строками, т.е с полученными данными, которые нельзя сделать заменами. Или можно, но не всегда это удобно. В Датакол со…
Сбор стартовых URL без подбора XPATH
Часто приходится собирать данные с нескольких стартовых URL. Если их не много, то можно просто скопировать и вставить. Но бывает, что их 10, 20 и…
Проблемы со сбором ссылок
Две самые основные проблемы сбора ссылок в Датакол: Наличие пробела в ссылке Не корректная относительная пагинация 1. Наличие пробелов в УРЛ у меня как-то само…
Работа Datacol с ReCaptcha. Ручной режим
К сожалению этот метод уже не работает. Сам недавно делал и не вышло. Не возможно отметить в браузере Датакол галочку, что я не робот. Наверное…
Работа с заменами. Часть 2
Сегодня расскажу, как можно использовать импорт и экспорт в заменах. Это иногда нужно, если вам необходимо добавить много замен и естественно заполнять каждую на вкладке…
Полезные регулярные выражения (regexp). Часть 2
Продолжаем тему регулярок, которых многие боятся ) Пред дальнейшим прочтением рекомендую ознакомиться с прошлым материалом. 1. Получаем ссылку на видео с вставки ютуб. Видео имеет обычно…
Работа с куками в стандартном загрузчике
В комментариях меня просили показать, как делать авторизацию в стандартном загрузчике с помощью куки. Сразу оговорюсь на всех сайтах это не пройдет, и куки живут…