Веб-разработка

Создание парсеров, постеров, скриптов, пауков, интеграций

Несколько слов об услуге

В своей работе с рекламой, сео, аналитикой и маркетингом мы всегда сталкиваемся с необходимостью автоматизации сбора, хранения и обработки данных. Внутри мы используем несколько десятков парсеров, постеров, скриптов передачи данных между системами, пауков, грабберов.

Мы готовы предложить вам услуги веб-разработки под ваши задачи.

Что мы предлагаем

Разработка парсеров и грабберов

Парсеры (или грабберы) это скрипты, которые собирают данные с разных сайтов или приложений в нужном формате. Данные могут использоваться для анализа, размещения на собственных ресурсах.

При разработке парсера мы сразу закладываем все возможные варианты обхода блокировок со стороны сайтов, за счет чего не приходится постоянно дописывать и переделывать парсер.

Разработка постеров

Постеры позволяют автоматически по заданному расписанию или триггерам публиковать контент (обычно объявления, комментарии, статьи) на нужных площадках.

У нас есть собственная платформа для постинга, в которой уже заложен весь необходимый функционал: обход блокировки, расписание, триггеры, ввод / вывод данных. За счет кастомизации этой платформы (а не написания кода с нуля) сроки разработки постеров у нас существенно сокращены.

Разработка пауков (spiders)

Пауки (они же спайдеры) в автоматическом режиме обходят сайты и структурированно собирают с них информацию. При разработке пауков мы используем самый популярный и функциональный фреймворк - Scrapy. В него изначально заложены работа с прокси, парсинг DOM, обработка ответов сервера, структурирование собранных данных, фильтры для включения / исключения нужных доменов и многое другое.

Разработка скриптов интеграции между системами

При построении систем сквозной аналитики мы постоянно сталкиваемся с задачей передачи данных их одной системы в другую. Очень часто эти системы никак не связаны друг с другом.

Мы разрабатываем скрипты, связывающие различные системы между собой: CMS, CRM, телеофония, счетчики аналитики, рекламные кабинеты, сервисы для сайтов (коллтрекинг, чаты, складской учет, логистика) и многое другое.

Все скрипты интеграции могут быть расположены на наших серверах, работать по заданному расписанию в режиме 24 / 7.


С чем мы работаем

Технологии

Инструментарий, который мы обычно используем в разработке.

  • Языки: Python, PHP, JavaScript, Node.js, R
  • Базы данных: PostgreSQL, MySQL, MongoDB, Google BigQuery
  • Фреймворки: Django, Flask, Yii
  • Серверы: Nginx, Apache
  • Облачные сервисы: DigitalOcean, Amazon EC2, Google Cloud
  • Прочее: ProxyBroker, Tor, Selenium

Системы и площадки

Площадки и системы, с которыми мы чаще всего работаем.

  • Соцсети: Вконтакте, Instagram, Одноклассники, Facebook
  • CRM: AmoCRM, Bitrix24
  • CMS: 1C Bitrix, WordPress,
  • Сервисы: Google Analytics, Я.Директ, CallTouch, Comagic, JivoSite

Почему стоит обратиться к нам

Профильность

Мы не занимаемся "всем": разработкой сайтов, версткой, дизайном, написанием плагинов для CMS... Мы делаем только скрипты для работы с данными, но делаем их быстро и качественно.

Поддержка и доработка

В случае необходимости, мы всегда доработаем уже созданные для вас скрипты и парсеры.

Размещение у себя

Мы легко можем разместить готовые скрипты у себя на серверах. Вам не надо ничего до настраивать, поднимать сервер или хостинг, просто пользуйтесь.

Соблюдаем сроки, всегда на связи

Мы всегда выполняем все работы в оговоренные сроки, ответа на письма не надо ждать по несколько дней.


Нам доверяют


ЗАКАЗАТЬ РАЗРАБОТКУ СКРИПТА