4.88/5, Голосов: 8
Доступно

[ZennoPoster] Парсер женских фото с dating-сайта с автосортировкой

Тема в разделе "Бизнес и свое дело", создана пользователем kapelan28, 27 июл 2017.

Цена: 12318р.
Взнос: 300р.
100%
  1. 1.  
  2. 2.  
  3. 3.  
  4. 4.  
  5. 5.  
  6. 6.  
  7. 7.  
  8. 8.  
  9. 9.  
  10. 10.  
  11. 11.  
  12. 12.  
  13. 13.  
  14. 14.  
  15. 15.  
  16. 16.  
  17. 17.  
  18. 18.  
  19. 19.  
  20. 20.  
  21. 21.  
  22. 22.  
  23. 23.  
  24. 24.  
  25. 25.  
  26. 26.  
  27. 27.  
  28. 28.  
  29. 29.  
  30. 30.  
  31. 31.  
  32. 32.  
  33. 33.Grek2010  
  34. 34.  
  35. 35.  
  36. 36.  
  37. 37.  
  38. 38.  
  39. 39.  
  40. 40.  
  41. 41.  
  42. 42.  
  43. 43.  
  44. 44.  
  45. 45.  
  46. 46.  
  47. 47.  
  48. 48.  
  49. 49.  
  50. 50.  
  51. 51.  
  52. 52.  
  53. 53.  
  54. 54.  
  55. 55.  
  56. 56.  
  57. 57.  
  58. 58.  
  59. 59.  
  60. 60.  
  61. 61.  
  62. 62.  
  63. 63.  
  64. 64.  
  65. 65.  
  66. 66.  
  67. 67.  
  68. 68.  
  69. 69.hunter1989  
Статус темы:
Закрыта.
  1. kapelan28

    kapelan28 kapelan28 ЧКЧлен клуба (А)

    Здравствуйте, уважаемые одноклубники!
    Первая складчина на первый мой шаблон :)
    P.S. я не гений в ZP, еще только учусь, так что сильно прошу не пинать )

    Предлагаю небольшой шаблон по парсингу женских фотографий с одного сайта знакомств.
    Функции шаблона:
    1. Сбор ссылок на все женские анкеты
    2. Сбор ссылок на фотографии с собранных анкет
    3. Скачивание фотографий по собранным ссылкам
    4. Сортировка фотографий по уникальным папкам (в каждой папке фото только одной конкретной девушки)

    [​IMG]

    Данные по шаблону:
    Писался и проверялся в работе на ZP 5.9.9.1 и 5.10.2.0
    Шаблон работает без использования браузера - только GET-запросы и регулярки (минимальный расход трафика и высокая скорость работы)
    Шаблон будет привязан и доступен только на выполнение
    Шаблон работает только в 1 поток
    В комплекте с шаблоном будет идти небольшая текстовая инструкция по функциям и настройке.
    Основные подсказки по шаблону прописаны во входных настройках (на скрине часть видна). Настроек минимум.

    Вопросы - Ответы
    Будет ли ZennoBox - нет, не планировалось
    Будет ли работать на демо-версии - да, должен
    Будет ли поддержка шаблона - да, правки вносится будут, если будет необходимость
    Будет ли развитие шаблона - глобальных изменений пока не планирую
    Нужны ли доп. затраты - нет, кроме наличия ZennoPoster больше ничего не надо
    Что за сайт, откуда парсим - скажу после проверки тремя оф. проверяющими
    Много ли фотографий, анкет - около 6 000 анкет, около 66 000 фотографий
    Какого качества фото - хорошего качества
    Есть ли ню-фото - не нашел таких, все в одежде, хотя одежда разной длины, открытости и откровенности :)
    Кому пригодится шаблон - многим, кто занимается как dating-направлением в соц. сетях, так и просто работает с женскими аккаунтами, кому необходима именно серия фотографий одной девушки
    Возраст, ГЕО девушек - 20-40 лет, РФ, Украина (может СНГ)
    Сколько фотографий в анкете - по разному, у кого-то 5-10 шт, а есть и по 35 фотографий на анкете.
    Парсинг происходит с сайта



    Шаблон готов. Ищу 3-4 официальных проверяющих с ZP

    ОТЗЫВЫ

    Первый
    Второй
    Третий
     
    Последнее редактирование модератором: 11 авг 2017
    axe55, mironoff, Alavr и 2 другим нравится это.
  2. Последние события

    1. Lichers

      Lichers не участвует в складчине.

      23 ноя 2017 в 09:59
    2. Lichers

      Lichers участвует в складчине.

      23 ноя 2017 в 09:58
    3. hunter1989

      hunter1989 участвует в складчине.

      23 ноя 2017 в 09:28
    4. hunter1989

      hunter1989 не участвует в складчине.

      23 ноя 2017 в 09:27

    Последние важные события

    1. skladchik.com

      Складчина доступна.

      24 авг 2017
    2. skladchik.com

      Осталось 5 дней до завершения складчины.

      24 авг 2017
    3. skladchik.com

      Складчина активна.

      22 авг 2017
    4. skladchik.com

      Сбор взносов начинается 22.08.2017.

      20 авг 2017
  3. Доктор Лектер

    Доктор Лектер Доктор Лектер МодерМодератор Команда форума

    @kapelan28, приветствую. Какая скорость парсинга фоток в 1 поток получается?
    И еще: как много новых анкет появляется в неделю/месяц? Новое мясо Новые материалы всегда будут полезны для работы.
     
  4. kapelan28

    kapelan28 kapelan28 ЧКЧлен клуба (А)

    Сбор всех анкет - около 12 минут
    Сбор всех ссылок на фото - пару часов, может часа 3-4 (не замерял точную цифру)
    Скачивание - тут от интернета зависит
    Автосортировка - очень быстро.
    мало, там каждый день плюс-минус 1-2 анкеты. Но опять же - специально не отслеживал, просто при парсинге анкет заметил разное количество строк.
     
  5. DisAsm

    DisAsm DisAsm ОргОрганизатор

    @kapelan28, готов проверить. ZP имеется.
     
    kapelan28 нравится это.
  6. paulb

    paulb paulb ЧКЧлен клуба

    Как насчет водяных знаков? Работаю только с чистыми фотками... Если есть, то каков примерно процент? Спасибо.
     
  7. kapelan28

    kapelan28 kapelan28 ЧКЧлен клуба (А)

    Сколько фотографий просматривал - все чистые в этом плане, ни одной пока не попалось с водяными знаками, да и сами фото, такое впечатление, что сделаны на зеркальный фотоаппарат.
    Все 66000+ фотографий я так и не скачал до сих пор, да и смотреть такой объем долго очень.
     
    paulb нравится это.
  8. kapelan28

    kapelan28 kapelan28 ЧКЧлен клуба (А)

    starters нравится это.
  9. starters

    starters starters ОргОрганизатор (А)

    Спасибо
    Взял на проверку другую тему
    больше 1 не беру
     
    Алёнка XXX и kapelan28 нравится это.
  10. kapelan28

    kapelan28 kapelan28 ЧКЧлен клуба (А)

    Понятно, если будет возможность взять на проверку - пиши.
     
    starters нравится это.
  11. Рогожкин

    Рогожкин Рогожкин ОргОрганизатор (А)

    Привет. Тоже не могу, сильно загружен. Но почитал описание, за такую цену может и сойдёт, но если по хорошему, то мало входных настроек, чтобы настроить парсинг под себя.. Нужно хотя бы регулировку возраста вручную, гео на выбор, побольше сайтов для парсинга, регулировка по количеству фото, какие нибудь проверочки на качество, уникализацию (так как эти 6 тысяч анкет спарсят и проспамят, оглянуться не успеешь). Удачи с проверкой :)
     
    Goodmark, madamLi, kapelan28 и 3 другим нравится это.
  12. kapelan28

    kapelan28 kapelan28 ЧКЧлен клуба (А)

    На счет всего перечисленного - буду под другой сайт делать, постараюсь там реализовать этот функционал (или хотя бы его часть). На счет уникализации - думал на эту тему, но у меня под рукой есть другой бесплатный софт, который уникализирует не хуже ЗП (ты про него сам говорил еще в первом курсе). Да это и логично - скачал фотки, прогнал через уникализацию. Глупо использовать их как есть.
     
    Малай и Рогожкин нравится это.
  13. Малай

    Малай Малай ЧКЧлен клуба

    Поучаствую, нужный инструмент. Из ВК и ок процентов 60-70 достойных фоток заспамлены
     
    kapelan28 и paulb нравится это.
  14. Hozy84

    Hozy84 Hozy84 ЧКЧлен клуба (А)

    Это смотря чем и как отбирать, а также уникализировать)
     
  15. Малай

    Малай Малай ЧКЧлен клуба

    Ну уникализация не есть проблема при наличии материала. И средства для этого озвучены не раз.
     
  16. Hozy84

    Hozy84 Hozy84 ЧКЧлен клуба (А)

    Ты прав. Но если при парсинге использовать умный алгоритм, то упомянутые тобой соц. сети еще парсить и парсить. В одноклассниках только сотня миллионов аккаунтов, которые можно использовать. Если интересно, смотри мою подпись. Будет Жарко)
     
    Последнее редактирование: 30 июл 2017
  17. sergoas

    sergoas sergoas ЧКЧлен клуба

  18. Базы для бизнеса

    Базы для бизнеса Базы для бизнеса ШтрафникШтрафник

  19. kapelan28

    kapelan28 kapelan28 ЧКЧлен клуба (А)

    По просьбе проверяющих добавил в шаблон возможность сбора анкет по указанному интервалу возраста (правда, это серьезно замедляет скорость сбора на первом этапе), поэтому сделал выбор режима сбора - всех подряд или по указанным годам.
    [​IMG]
     
    paulb нравится это.
  20. Мария 151

    Мария 151 Мария 151 ЧКЧлен клуба

  21. Hozy84

    Hozy84 Hozy84 ЧКЧлен клуба (А)

    Логику измени. Если хочешь, могу помочь.
     
Статус темы:
Закрыта.

Поделиться этой страницей

  1. Сбор взносов (Бизнес и свое дело):
  2. Новые складчины (Бизнес и свое дело):
  3. Нужен организатор (Бизнес и свое дело):