(ZP) Парсер почт и данных пользователей соц.сети "Мой Мир" + Бонус

(ZP) Парсер почт и данных пользователей соц.сети "Мой Мир" + Бонус

Всем привет. Представляю Вашшему вниманию парсер соцсети "Мой Мир". Функционал обычный - парсит всех участников из группы/ групп (в зависимости от настроек), парсит друзей по уже спаршенному списку. На выходе создаются файлы .txt (только почты) или .xlsx с оформлением (все данные, которые заполнил юзер). Для каждой группы в отдельном файле.

Основные возможности:
- Аккаунты mail ru не нужны
- Обход ограничений по выдаче количества страниц с участниками групп
- Парсинг: по ключевику, по списку групп из файла, сбор друзей по списку
- Парсинг друзей (парсите группы, все данные и ссылки пользователей сохраняются, далее вы можете спарсить друзей уже спаршенных пользователей и т.д. - получается почти бесконечное количество почт для работы)
- Режим только почты
- Сохранение доп. инфы об участниках в xlsx-файл (мэйл, имя, возраст, город, последний онлайн на сайте)
* Работу через прокси можно прикрутить - обычно не требуется

Спойлер: Скрин настроек

Спойлер: Скрин парсинга

Спойлер: Скрины результатов парсинга, почты

Спойлер: Скрины результатов парсинга, все данные

/SPOILER]

++ Бонус ++
При участии от 50 человек - Чекер почт на валидность в подарок)

* Бонус обязательно получат:
- ЧК поставившие складчину в подпись;
- Складчик разместивший релевантное объявление в 3 смежных темах;


++ Бонус ++

При участии от 30 человек - Чекер почт на валидность в подарок!

* Бонус обязательно получат:
- ЧК, поставившие складчину в подпись;
- Складчики, разместившие 3 релевантные рекламные объявления в смежных темах (Внимание! 1 объявление на тему!)

Отзыв:
Basill

 

@DenXiaopin
добавил бонус.

 

Он в Spoiler ушел - там [ затерлась перед /SPOILER]
@Mr-Grey оставьте бонус за 30 чел.

 

У тебя и прошлый был под спойлером.

 

@DenXiaopin
Какая скорость парсинга ?

 

Сейчас в однопотоке, примерно, 800 мыл в минуту. Планирую многопоток допилить.

 

Да, не увидел что скобка удалилась. Увидел только после вашего сообщения, что под спойлер залезли. Поправьте, пожалуйста.

PS: 2 проверяющих уже есть! Нужен 3-й.

 

В подписи

 

3 проверяющих есть, жду от них ID зенки.

 

В подписи

 

В подписи

 

Отзыв:

В каком виде предоставлен материал и насколько удобно он оформлен?

2 шаблон и инструкции к ним.

Сколько времени заняло изучение и выполнение заданий данного инфопродукта?
Насколько легко усваивается материал, вызвал ли он какие-либо затруднения при проверке?
Сколько времени заняло достижение заявленного автором результата?

Шаблоны понятны, пробежал инструкцию, настроил и ждешь результаты. По скорости
Валидатор быстрый. Группы тоже быстро парсится (1 группа в 2 секунды), обработка изеров из групп

Спойлер: Лог

Тип Время Сообщение
22:02:52 Взял группу Спорт Mail.Ru, в группе 5737 участников.
22:03:22 Спарсил 500 из 5737 юзеров.
22:03:46 Спарсил 1000 из 5737 юзеров.
22:04:05 Спарсил 1499 из 5737 юзеров.
22:04:25 Спарсил 1999 из 5737 юзеров.
22:04:45 Спарсил 2499 из 5737 юзеров.
22:05:10 Спарсил 2999 из 5737 юзеров.
22:05:32 Спарсил 3491 из 5737 юзеров.
22:05:57 Спарсил 3983 из 5737 юзеров.
22:06:20 Спарсил 4483 из 5737 юзеров.
22:06:45 Спарсил 4983 из 5737 юзеров.
22:07:05 Спарсил 5483 из 5737 юзеров.
22:07:18 Приступаю к заполнению базы
22:08:45 Заполнил базу
22:08:47 Сохранил 5723 из 5737 юзеров в "Базы\финансы - Спорт Mail.Ru, 5723.xlsx". Начал 22:2:50, закончил 22:7:15

Друзья примерно с такой же скоростью, но зависит от кол-во друзей у человека

Нужны ли специальные навыки и дополнительные материальные вложения?

Навыки нет, вложения для валидатора маил нужны акауты от мали.ру и при желании прокси если многопоток.

Оказывал ли автор должную поддержку в процессе проверки?

Да оказывал, подправил логику шаблона.

Каковы в целом общие впечатления о компетентности автора?

Автор компетентен.

Материал полностью соответствует заявленному автором описанию и пригоден для проведения складчины.

Если будут вопросы, пишите свой вопрос с

Код:

@Basill

С удовольствием отвечу!

По маила это уже мой 3 или 4 шаблон на проверки на эту тему, шаблон отличный и ничем не хуже остальных.

 

Небольшие обновления парсера: Подкорректирована логика, Добавлен лимит парсинга по группам и по друзьям, Более удобный лог

 

Отзыв:

В каком виде предоставлен материал и насколько удобно он оформлен?
Два шаблона и инструкции

Сколько времени заняло изучение и выполнение заданий данного инфопродукта?
Несколько дней, были исправления и доработки, повторные проверки

Насколько легко усваивается материал, вызвал ли он какие-либо затруднения при проверке?
Затруднений не вызвал, все понятно и логично.

Сколько времени заняло достижение заявленного автором результата?
Время зависит от популярности запроса для парсинга групп и количества пользователей в них.

Нужны ли специальные навыки и дополнительные материальные вложения?
Навыки не нужны, вложения на акки майл.ру и прокси для валидации.

Оказывал ли автор должную поддержку в процессе проверки?
Оказывал, доработал шаблон.

Каковы в целом общие впечатления о компетентности автора?
Автор компетентен.

Материал полностью соответствует заявленному автором описанию и пригоден для проведения складчины.

 

Отзыв:

Укажите свой уровень владения информацией и навыками: в данной области вы новичок, теоретик либо опытный практик?
Опытный практик.

В каком виде предоставлен материал и насколько удобно он оформлен?
Два шаблона (основной и бонусный) с сопутствующими файлами и папками, текстовые инструкции

Сколько времени заняло изучение и выполнение заданий данного инфопродукта?
Несколько дней, из-за доработки шаблона под мою версию ZP

Насколько легко усваивается материал, вызвал ли он какие-либо затруднения при проверке?
Затруднений не возникало.

Сколько времени заняло достижение заявленного автором результата?
На парсинг 1 страницы групп уходит 2 секунды, парсинг участников групп - зависит от количества участников.

Нужны ли специальные навыки и дополнительные материальные вложения?
Нужны доп. вложения на аккаунты mail.ru, прокси. Требуются навыки работы с зеннопостером.

Оказывал ли автор должную поддержку в процессе проверки?
Автор оказывал поддержку и оперативно вносил правки в шаблон.

Каковы в целом общие впечатления о компетентности автора?
Автор компетентен.
Шаблон проверялся на версии ZennoPoster - 5.15.0.0, и на момент проверки - полностью работоспособный.

Материал полностью соответствует заявленному автором описанию и пригоден для проведения складчины.
 

 

Проверка пройдена, наберем 10 человек и стартуем.

PS: Многопоток тестируется, скорость парсинга выросла в 3-4 раза.

 

@DenXiaopin
в подписи

 

@DenXiaopin
Есть грязная база с Моего Мира сам собирал другими шаблонами - не получится ее почистить вашим шаблоном - на дату последнего онлайн?
Чистка базы - актуальная тема- думаю у многих стоит такая проблема - не планируете допилить ее в ваш шаблон

 

Прокси все-же лучше прикрутить - Можно шаблоном работать в многопотоке?

 

Не планировал такое. В каком формате база? Что конкретно чистить надо - в чем заключается "грязность" базы?

Прокси прикрутить не проблема. В обновленной версии многопоток зашит в коде, т.е. в настройках шаблона выбирается сколько потоков будет работать.

Спойлер: Скрин настроек