1С Форум

Использование прокси

Использование прокси, Принцип парсинга через прокси

Пользователь

Сообщений: 21 Регистрация: 14.11.2019

14.11.2019 10:42:25

Добрый день, как быстро заблокируют прокси, если парсить в день свыше 1500 товаров? На каждый товар отдельный запрос или все товары в одном запросе передаются? Мы используем 5 адресов прокси, при парсинге меняются ли они или используется один, пока не заблочат?

Администратор Администратор Сообщений: 2827 Регистрация: 28.08.2013	#2 0 15.11.2019 18:28:53 прокси меняются при каждом запросе но 5 прокси мало для 1500 товаров вам нужно 50 прокси для более менее нормальной загрузки

Расул Куванаев

Пользователь

Сообщений: 21 Регистрация: 14.11.2019

13.12.2019 10:45:08

Если прокси адрес был заблочен, подождали, пока разлочится, запускаем парсер:
- как быстро заблочится прокси адрес? Запоминает ли Яндекс эти адреса?
Приобрели по ссылке в вашей обработке 30 прокси адресов, с первую неделю было все хорошо. Потом эти адреса начали блочиться. Не парсили 3 дня, дождались, пока все адреса разлочатся, запустили парсер на 10 товаров. Все прокси адреса вновь стали "заблокированными".
Необходимо приобретать прокси адреса по мере первой блокировки?

Администратор Администратор Сообщений: 2827 Регистрация: 28.08.2013	#4 0 13.12.2019 14:06:21 яндекс поменял алгоритмы определения роботов и поэтому банит адреса сразу же. Работаем над решением этой проблемы. Сейчас пока возможна загрузка только через АПИ. Метод Парсер, временно не работает

Читают тему (гостей: 1)

ПОСЛЕДНИЕ СООБЩЕНИЯ

ЭКСЕЛОН - Загрузка в 1С из EXCEL - Поехало левое меню и вопрос по правам доступа	Станислав Макаров 29.01.26 18:49
АВОШОП - Настройка АВОШОП	Администратор 24.01.26 9:15
ЭКСЕЛОН - Загрузка в 1С из EXCEL - Проставляется не правильный склад.	Администратор 23.01.26 14:53
ЭКСЕЛОН - Загрузка в 1С из EXCEL - Автозагрузка	Администратор 19.01.26 10:32
Комментарии к статьям - Мастер загрузки из Excel в 1С - номенклатура, цены, документы	Администратор 12.01.26 14:57
ЭКСЕЛОН - Загрузка в 1С из EXCEL - Вопросы-ответы по разработке "Загрузка из Excel в 1с"	Александр Двоскин 12.01.26 9:04
Другие продукты - Доработки в АльфаАвто6	Администратор 07.01.26 14:49
ЭКСЕЛОН - Загрузка в 1С из EXCEL - При загрузки номенклатуры не прописывается вид и цены не прикрепляются	Администратор 07.01.26 14:48
Комментарии к статьям - Чистка базы 1С. Удаление "не удаляемых объектов"	Максим Синицин 21.12.25 13:24
ЭКСЕЛОН - Загрузка в 1С из EXCEL - При загрузке групп не отображаются группы номенклатуры	Администратор 15.12.25 6:51
ЭКСПОТОР - Выгрузка номенклатуры из 1С - Выгрузка и соответственно загрузка состава наборов	Администратор 05.12.25 11:39
ЭКСЕЛОН - Загрузка в 1С из EXCEL - не работает ввод остатков (пишет поле организация не заполнено)	Администратор 30.11.25 10:06
ЭКСЕЛОН - Загрузка в 1С из EXCEL - ИНСТРУКЦИЯ ПО УСТАНОВКЕ В ОБЛАЧНЫЙ КЛИЕНТ 1С: ERP УСО2	Администратор 24.11.25 13:43
ЭКСЕЛОН - Загрузка в 1С из EXCEL - Объединение с подстстемой	Администратор 24.11.25 13:41
- распознование	Администратор 24.11.25 13:39

Сейчас на форуме (гостей: 15)

Всего зарегистрированных пользователей: 3078

Приняло участие в обсуждении: 457

Всего тем: 1023

Всего сообщений: 7023