Открыто

MonsterParser2Gis - многопоточный парсер 2 гис + доп. парсер Email (работает на API) Доступ навсегда

Тема в разделе "Бизнес и свое дело", создана пользователем zennomonster, 18 янв 2019.

Цена: 1900р.
Взнос: 1900р.

Основной список: 12 участников

Резервный список: 10 участников

Статус обсуждения:
Комментирование ограничено.
  1. 18 янв 2019
    #1
    zennomonster
    zennomonster ЧКЧлен клуба

    MonsterParser2Gis - многопоточный парсер 2 гис + доп. парсер Email (работает на API) Доступ навсегда

    [​IMG]
    Всем привет! Представляю Вашему вниманию парсер компаний с сайта 2Gis.

    Парсер работает по API в многопоточном режиме. Работает очень быстро, не требует прокси для работы

    По просьбам участников форума изменил условия, теперь доступ выписывается навсегда, без ограничений по времени. Все обновления и улучшения скрипта - бесплатно!

    Уникальность парсера в том, что он собирает данные не только с 2Gis.

    Дело в том, что 2 гис показывает далеко не все Email адреса компаний, которые там размещены. Этот парсер собирает все данные, которые есть в дубль гис + собирает Email адреса с каталога jsprav.ru и если Email адреса нет в обоих каталогах, парсер делает запросы на сайт компании, и если на главной странице или на странице контактов указан Email, парсер получает его и сохраняет в базу.​

    Таким образом парсер собирает максимальное количество Email адресов компаний, которое возможно.

    [​IMG]

    Кроме того, есть функция, которая делает запрос на сайт rusprofile.ru и получает ФИО директора компании, на которого она оформлена. ФИО удаётся получить не часто, т.к. бывает что есть несколько компаний с одним названием и определить какая именно компания нам нужна не возможно. Но где это возможно и компания с таким названием в регионе одна, парсер берёт ФИО директора и сохраняет в базу.

    [​IMG] Парсинг всех данных с 2Gis
    [​IMG] Дополнительный парсинг Email с каталога jsprav.ru
    [​IMG] Дополнительный парсинг Email с сайта компании
    [​IMG] Парсинг ФИО каталога rusprofile.ru

    Все данные сохраняются в Excel таблицу в удобном для работы виде:

    [​IMG]

    [​IMG] Название компании
    [​IMG] Рубрика
    [​IMG] Город
    [​IMG] Адрес
    [​IMG] Email адреса
    [​IMG] Телефоны
    [​IMG] ФИО директора
    [​IMG] ВКонтакте
    [​IMG] Facebook
    [​IMG] Instagram
    [​IMG] Twitter
    [​IMG] Сайт компании
    [​IMG] YouTube
    [​IMG] Одноклассники
    [​IMG] Количество филиалов
    [​IMG] ID компании
    [​IMG] Широта
    [​IMG] Долгота

    Цена 1900 руб. с человека.

    Доступ выписывается навсегда

    Все обновления и улучшения программы, а так же техническая поддержка бесплатно!

    На форуме буду регулярно. Веду этот проект и несколько других. В случае каких то изменений в 2гис буду оперативно обновлять скрипт и поддерживать его актуальность

    Бонус:
    - Всем за рекламу в рамках правил (4 поста в смежных темах либо ссылка в подписи) будет увеличено количество потоков, что увеличит скорость парсинга.
    В стандартной версии максимальное количество потоков - 10.
    В бонусной версии - 20 потоков.
     
    Последнее редактирование модератором: 19 янв 2019
    3 пользователям это понравилось.
  2. Последние события

    1. dimkadoma
      dimkadoma не участвует.
      30 июн 2023
    2. artoff
      artoff не участвует.
      27 июн 2022
    3. evaio
      evaio не участвует.
      4 июл 2021
    4. skladchik.com
      В складчине участвует 20 человек(а).
      4 май 2021
  3. Обсуждение
  4. 18 янв 2019
    #2
    InoGram
    InoGram ЧКЧлен клуба
    Вот, другое дело, молодцом, прислушался к нашим просьбам ...
    Хоть я и купил другой парсер, твой тоже возьму.
     
    4 пользователям это понравилось.
  5. 19 янв 2019
    #3
    Хэнк Муди
    Хэнк Муди ОргОрганизатор
    С удовольствием взял бы на проверку
     
  6. 20 янв 2019
    #4
    skladchikum
    skladchikum ЧКЧлен клуба
    Поставил в подпись
     
    1 человеку нравится это.
  7. 20 янв 2019
    #5
    zennomonster
    zennomonster ЧКЧлен клуба
    Отметил. Записаться не забудьте ;)
     
  8. 20 янв 2019
    #6
    InoGram
    InoGram ЧКЧлен клуба
    @zennomonster как специалист, скажите, в 2gis после НГ менялось что то на сайте?
     
  9. 21 янв 2019
    #7
    InoGram
    InoGram ЧКЧлен клуба
    @zennomonster при каких условиях стартуем?
     
  10. 21 янв 2019
    #8
    mironoff
    mironoff ДолжникДолжник
    Поставил в подпись.
     
    1 человеку нравится это.
  11. 21 янв 2019
    #9
    OrangeCat
    OrangeCat ОргОрганизатор
    Поставил в подпись.
     
    1 человеку нравится это.
  12. 23 янв 2019
    #10
    zennomonster
    zennomonster ЧКЧлен клуба
    Всем привет!

    В плане парсинга особо ничего не поменялось

    При наборе 20 участников складчины
     
  13. 23 янв 2019
    #11
    Vaultboy
    Vaultboy ЧКЧлен клуба
    сколько по времени парсит полную базу в 10/20 потоков?
     
  14. 24 янв 2019
    #12
    smillionov
    smillionov СкладчикСкладчик
    Привет, подскажи пожалуйста Как старт планируется ; от кол-ва чел в складке или на какую то дату будет сбор?
    + еще нужен проверяющий и орг...
    - по времени наверное долго собираться будем
     
  15. 24 янв 2019
    #13
    Vadim321
    Vadim321 ЧКЧлен клуба
    В подписи!
     
    1 человеку нравится это.
  16. 24 янв 2019
    #14
    zennomonster
    zennomonster ЧКЧлен клуба
    Привет! Складчина стартует при наборе 20 участников. Меньше чем за неделю собралось 10 участников... Так что я думаю скоро начнём
     
    1 человеку нравится это.
  17. 25 янв 2019
    #15
    ihorhran
    ihorhran ЧКЧлен клуба
    есть ли поиск по Львову, Украина, на сколько детальный поиск по Львову?
     
  18. 26 янв 2019
    #16
    OrangeCat
    OrangeCat ОргОрганизатор
    А до какого кол-ва ждать будем? Вижу новых особо не добавляется (
     
  19. 27 янв 2019
    #17
    zennomonster
    zennomonster ЧКЧлен клуба
    Уже нашёл проверяющих. Отдаю на проверку, ждём отзывы в ближайшие несколько дней и запускаемся. Не будем ждать больше людей.
     
    4 пользователям это понравилось.
  20. 6 фев 2019
    #18
    InoGram
    InoGram ЧКЧлен клуба
    Когда начнём? Думаю надо прорекламировать
     
  21. 10 фев 2019
    #19
    InoGram
    InoGram ЧКЧлен клуба
    Ребят, давайте автору поможем и прорекламируем и пофиК член ты или не член.
    Реально за эти деньги+вечная лицензия=получается шикарный подарок
     
    1 человеку нравится это.
  22. 10 фев 2019
    #20
    Bro777
    Bro777 ЧКЧлен клуба
    В подписи
     
    1 человеку нравится это.
Статус обсуждения:
Комментирование ограничено.

Поделиться этой страницей