Как собрать ссылки с sitemap.xml
Иногда получить ссылки на товары проще через уже готовый файл со ссылками. Таковым является карта сайта. Обычно файл расположен по адресу http://site.com/sitemap.xml. Если по указанной ссылке карта не открывается тогда попробуйте посмотреть ссылку на него в файле robots.txt – http://site.com/robots.txt.
Он указывается в переменной Sitemap:
Теперь о самой настройке Датакол:
- Используем Стандартный загрузчик
- Выставляем кодировку utf-8
- Для сбора ссылок указываем регулярку <loc>(.*?)</loc>
- Аналогично делаем на вкладке Продвинутые, чтобы указать Датакол, что это ссылка
- Теперь в список начальных URL указывайте путь к карте сайта
Дальнейшая процедура стандартна.
