Email: support@grablab.io
Skype: lorien.name
Github: lorien

Парсинг сайтов на заказ

Здравствуйте. Я программист с десятилетним опытом разработки программ. Моя область экспертизы - парсинг сайтов и обработка данных. Я успешно завершил более 300 проектов парсинга сайтов.

Мой опыт:

  • Парсинг больших сайтов, содержащих миллионы страниц
  • Использование прокси для обхода защиты сайтов от парсинга
  • Парсинг сайтов, защищённых каптчей
  • Парсинг динамических-сайтов, работающих на javascript (AJAX)
  • Извлечение данных из открытых API веб-сервисов
  • Обработка данных в XML, JSON, CSV документах
  • Хранение и обработка данных в Redis, MongoDB, MySQL и Postgresql базах данных
  • Построение веб-интерфейсов для управления парсерами сайтов
  • Построение сложных систем обработки данных из множества источников

Я автор открытого python фреймворка парсинга сайтов Grab. Я использую этот фреймворк в большинстве моих проектов парсинга сайтов.

Я буду рад поработать в интересном проекте, связанном с парсингом сайтов и обработкой данных. Вы можете связаться со мной через email или skype и мы подробно обсудим ваш проект, я назову цену и время, необходимое для сбора данных.

Если вам нужна программа, скрипт, бот для запуска на вашем сервере, то скорее всего у нас не получится сотрудничать. Я не предоставляю исходных кодов моих программ. Я собираю данные с помощью своих программ, серверов и прокси-серверов. Заказчик получает только данные, без исходного кода.

Базы данных на продажу

База данных ID и заголовков книг сайта amazon.com

$100  —  12.2 млн. books


База данных linkedin компаний

$2000  —  47 тыс. schools , 14.5 млн. orgs


База данных similarweb трафика 9 млн доменов

$500  —  8.8 млн. hosts


База данных компаний с сайта emis.com

$500  —  725 тыс. orgs


База данных криптовалют с сайта coinmarketcap.com

$100  —  866 coins


База данных сайтов рейтинга liveinternet.ru

Бесплатно  —  416 тыс. hosts


Почтовые адреса (емайлы) из WHOIS компаний сайта crunchbase.com

$100  —  115 тыс. mails , 452 тыс. domains


База данных компаний с сайта angel.co

$500  —  2.7 млн. orgs


База данных продуктов и отзывов с сайта g2crowd.com

$250  —  29 тыс. products , 171 тыс. reviews


База данных компаний и людей c сайта crunchbase

$1000  —  468 тыс. persons , 506 тыс. orgs


База данных компаний crunchbase

$500  —  506 тыс. orgs