Условия добавления и настройки сайтов на Q-Parser

Стоимость и сроки

Стоимость настройки и добавления в каталог одного нового сайта составляет 995 ₽

Сроки настройки одного сайта — 1–3 рабочих дня (пн–пт за исключением праздников). Если время подачи заявки позднее 12:00 МСК, то текущий день не учитывается. Обычно заявки обрабатываются группой, и возможно добавление сразу нескольких сайтов за указанный срок. Возможно увеличение сроков в связи с загруженностью очереди сайтов либо со сложностью настройки парсинга конкретного сайта.

Вы можете обратиться в чат поддержки для уточнения возможности ускорения обработки заявки. В зависимости от свободного времени, времени суток и общей занятости возможна настройка сайта в течение нескольких часов за дополнительную плату.

После добавления сайта пользователю отправляется уведомление на E-mail, а также предоставляется доступ к парсингу добавленного сайта без тарифа сроком на 5 дней для тестирования парсинга сайта. Дальнейший доступ к парсингу сайта осуществляется на общих условиях по тарифам сервиса.

Возможно изменение стоимости настройки в любую сторону по решению администрации Q-Parser. В этом случае стоимость работ оговаривается с пользователем индивидуально. В случае отказа пользователя при повышении стоимости уже внесённые деньги возвращаются пользователю в полном объёме.

Приватные сайты

Возможна настройка, при которой сайт не будет добавлен в общий каталог, а будет отображаться только для вашего аккаунта. Это подойдёт вам, если по каким-то причинам вы не хотите, чтобы сайт был публично доступен другим пользователям.

Стоимость настройки приватного сайта — 2000 ₽ 3000 ₽

Условия настройки, работы парсинга, выгрузки и гарантии остаются неизменными для приватных сайтов. Кроме режима отображения такие сайты не отличаются от остальных.

Что входит в настройку и добавление сайта

Сайт добавляется в каталог парсеров и становится доступным вам и остальным пользователям сервиса (кроме приватных сайтов).

Становится возможен парсинг товаров сайта и их выгрузка в поддерживаемые форматы согласно инструкции сервиса.

Формирование списка категорий

Список категорий сайта для парсинга формируется на основе меню или каталога сайта. Глубина вложенности категорий определяется структурой сайта.

В список категорий включаются только ссылки на каталоги товаров, исключая перечень брендов (если он представлен на сайте).

Список категорий формируется автоматически только при наличии технической возможности для конкретного сайта и не может гарантировать наличие 100% ассортимента сайта в этих категориях.

У пользователя всегда остаётся возможность ручного указания ссылки на нужную категорию и/или выбора из предоставленного списка.

Парсинг товаров

Парсинг товаров производится со страниц, которые указаны в качестве категорий сайта. При наличии пагинации парсятся товары со всех страниц указанной категории. Страница категории должна содержать непосредственно товары напрямую без перехода в подкатегории.

Со страницы товара забираются перечисленные ниже поля. Поле заполняется, только если нужная информация есть на странице и её можно отделить от остального содержимого карточки.

  • Ссылка — адрес детальной страницы товара, с которой собрана карточка.
  • Название — обычно заголовок h1 или другой основной заголовок детальной страницы товара. В название не попадают хлебные крошки, заголовок вкладки браузера, название категории и рекламные подписи.
  • Артикул — явно указанный артикул товара (подписи вроде «Артикул», «SKU», «Vendor code»). Если отдельного артикула нет, берётся другой явно выделенный код товара: «Код», «ID» и похожие короткие обозначения в шапке карточки или в характеристиках. Штрихкод, идентификатор из адреса страницы, размер и цвет варианта артикулом не считаются, если на сайте это отдельные значения. Если подходящего кода нет, в артикул подставляется название товара.
  • Бренд — торговая марка или производитель, если они отдельно указаны на странице: подпись «Бренд» или «Производитель», подпись у логотипа. Если марка встречается только внутри названия и нигде не выделена, поле остаётся пустым. Название магазина и категория брендом не считаются.
  • Цена — актуальная цена продажи, как правило в блоке рядом с кнопкой покупки. У товара парсится одна цена. Если на странице несколько цен, берётся первая оптовая цена за единицу товара. Зачёркнутая цена, цена «от», цена за квадратный метр или за упаковку в это поле не попадают, если рядом есть цена за сам товар. Если техническое исполнение сайта позволяет, при запуске парсинга можно выбрать, какую цену забирать.
  • Старая цена — цена до скидки, если она отдельно показана на странице, обычно зачёркнутым текстом. Если скидки нет, поле остаётся пустым.
  • Валюта — обозначение валюты у цены на странице товара. Если валюта не указана, подставляется российский рубль.
  • Фото — ссылки на изображения из галереи товара. По возможности собираются все фото товара всех цветов, если они уже есть на странице товара и не подгружаются с других страниц. Берутся крупные фото, а не миниатюры. Повторяющиеся ссылки отбрасываются.
  • Наличие — «Есть в наличии» или «Нет в наличии». Берётся из явной пометки на карточке: текст «В наличии» или «Нет в наличии», состояние кнопки покупки. Если явного обозначения нет, используется принцип «можно ли товар купить»: если купить можно, товар считается в наличии. Промежуточные значения вроде «Мало» или «Достаточно» трактуются логически в пользу «Есть в наличии» или «Нет в наличии».
  • Остаток — целое число единиц на складе, только если на странице указано конкретное число. Формулировки «много», «больше 10» и «в наличии» в остаток не записываются. Если остаток указан дробным числом, скорее всего он не будет спарсен либо попадёт текстом в характеристики.
  • Краткое описание — короткий текст в шапке карточки, рядом с фото или ценой, если такой блок отдельно выделен. Сохраняется вместе с оформлением (HTML).
  • Описание — полный текст со вкладки «Описание», «Подробнее» или аналогичного блока на странице товара. Сохраняется вместе с оформлением (HTML). Текст из метатегов страницы не используется. Если полного описания нет, а есть только краткий текст, он записывается в описание.
  • Файлы — ссылки на документы, приложенные к товару: инструкции, сертификаты, PDF и другие файлы.
  • Видео — ссылки на видео товара на странице или на внешнем сервисе (YouTube, Rutube и подобные), если ролик относится к этому товару.
  • Дополнительные характеристики — пары «название: значение» из отдельного блока характеристик: таблица, список или строки вида «Материал: хлопок». Несколько значений одной характеристики (например, размеры или цвета) сохраняются списком. Название, артикул, бренд, цена и описание в этот список повторно не копируются. Таблица внутри текста описания, которая не выделена как блок характеристик, остаётся частью описания.

Если техническое исполнение сайта позволяет, разные модификации одного товара парсятся отдельными товарами, каждый со своим набором характеристик и ценой.

Какие из этих полей удастся забрать, зависит от технического исполнения конкретного сайта.

Всегда остаётся возможность спарсить нужные данные своими CSS-селекторами, а также отредактировать товары вручную или через AI.

Если сайт поменялся

В случае изменений дизайна или технической составляющей сайта-донора парсинг может перестать работать.

Работоспособность парсинга сайта в случае технических изменений поддерживается без дополнительных оплат, без ограничения по срокам, но только при наличии технической возможности.

В случае смены домена сайта производится бесплатная перенастройка нового сайта при наличии перенаправления со старого адреса на новый или при наличии на новом сайте уведомления о переезде сайта.

Скорость парсинга

Q-Parser парсит информацию со скоростью, с которой работает сайт-донор. Вы можете примерно посчитать полное время парсинга сайта, умножив среднюю скорость ответа страницы с товаром на число товаров.

Для сайтов с защитой от ботов или проблемным доступом скорость парсинга может быть достаточно низкой.

Языковые версии сайта

Пользователь имеет право при подаче заявки на настройку сайта уточнить языковую версию сайта, которую ему требуется парсить.

В случае, если сайт имеет несколько языковых версий и пользователь не уточнил нужную, язык для парсинга выбирается на усмотрение администрации сервиса.

При наличии технической возможности в парсинг сайта добавляется настройка для выбора языковой версии сайта.

Автоматизированный перевод текстов

Для сайтов на иностранных языках (кроме схожих с русским: украинский и т. д.) добавляется возможность автоматического перевода названий, описаний и текстовых характеристик товаров на русский. Перевод на другие языки не предоставляется.

Возможность перевода предоставляется без гарантий и может не работать или частично работать на некоторых текстах или языках. При переводе из текста удаляются все HTML-теги.

Авторизация на сайтах

Q-Parser поддерживает парсинг с авторизацией через логин-пароль на сайте-доноре.

Логин-пароль указывается пользователем в форме заявки на настройку сайта. Указанные данные используются только для настройки парсинга. Непосредственно при парсинге каждый пользователь указывает свои данные для авторизации на сайте.

Администрация сервиса не несёт ответственности за сохранность логина и пароля пользователя.

Если указанные в заявке данные авторизации неверны, сайт настраивается без авторизации.

Q-Parser не загружает

  • Информацию, не имеющую прямого отношения к характеристикам товара (отзывы, рейтинги, сроки доставки и пр.);
  • Номера телефонов и другие персональные данные (согласно ФЗ № 519 от 30.12.2020);
  • Связи товаров друг с другом (похожие товары, комплекты сантехники, плитки и пр.);
  • Зависимости характеристик, цены или фото товара друг от друга. Например, если при выборе размера, цвета или другого варианта на странице меняются цена или фото, такая смена не парсится;
  • Комбинированные товары (например, мебельные комплекты);
  • Любую информацию, которая запрещена на территории РФ или страны, где находится пользователь;
  • Любую другую информацию на усмотрение администрации сайта;

Обработка JavaScript

Q-Parser не гарантирует выполнение JavaScript на страницах сайтов, которые парсит. Информация, которая подгружается или генерируется скриптами, может не попадать в парсинг.

Гарантии и возврат

В случае невозможности настройки сайта пользователю возвращается вся внесённая им сумма без комиссий или штрафов.

Возможность или невозможность настройки конкретного сайта, загрузки отдельных характеристик или категорий товаров определяется администрацией Q-Parser индивидуально для каждого сайта в зависимости от его технической реализации.

Вы вправе уточнить техническую возможность парсинга сайта или отдельных характеристик в техподдержке сервиса до подачи заявки на настройку сайта. В этом случае при невозможности парсинга оговоренных характеристик возможен возврат платежа за настройку сайта.

После настройки сайта возвраты производятся на основании пользовательского соглашения сервиса.

Отмена заявки

Пользователь вправе написать в техподдержку запрос на отмену заявки и возврат платежа. Возврат возможен в случае, если Q-Parser ещё не приступал к настройке сайта, а также на общих условиях возврата сервиса.

При отмене заявки из-за невозможности парсинга сайта оплаченная сумма возвращается на внутренний счёт пользователя.

Удаление сайта из каталога

Q-Parser старается поддерживать парсинг сайта и его нахождение в каталоге как можно дольше: любые правки в связи с изменениями на сайте мы вносим без дополнительной оплаты. Однако сайт может быть удалён с сервиса по следующим причинам (но не ограничиваясь ими):

  • Смена технического исполнения сайта и невозможность его дальнейшего парсинга;
  • Появление на сайте защиты от ботов, роботов и любых автоматизированных систем, блокирующей доступ парсера к сайту;
  • Появление блокировки доступа к сайту на географической или иной основе;
  • По заявке владельца сайта или в случае нарушения прав на использование товаров (или их отдельных фото или характеристик);
  • По прошествии более 180 дней в случае, если парсингом данного сайта не пользуется ни один пользователь сервиса;

Ни одно из условий не является «жёстким», всё рассматривается индивидуально. Q-Parser не удаляет сайт из каталога без веских причин.

В случае удаления сайта из каталога по любой причине деньги, оплаченные за настройку и добавление сайта, не подлежат возврату в случае, если с момента добавления сайта в каталог прошло более 5 календарных дней.