George1337
Premium Lite
- Регистрация
- 8 Дек 2015
- Сообщения
- 27
- Реакции
- 33
- Тема Автор Вы автор данного материала? |
- #1
Голосов: 0
Всем привет, снова.
Прошлую тему удалили из-за авторизации в ПО через форум, сказали убрать, убрал.
Хоть бы описание оставили, придётся снова писать)
В общем, попросили сегодня сделать парсер почт из групп Mail.Ru, сделал.
Разберём всё подробно.
В программе нужна авторизация через mail.ru, она является обязательной. Также, сам аккаунт mail.ru должен присутствовать в Моём Мире от Mail, это тоже обязательно.
1. Ссылка. Вставляем мы ссылку на группу так, чтобы не было после идентификатора группы НИ-ЧЕ-ГО, ни слэшей, ни ещё чего-либо, совсем ничего, это важно.
2. Прокси. Есть возможность подключить прокси 1 из 3 типов (HTTP/S, SOCKS 4, SOCKS 5), дабы избежать временной блокировки.
3. Многопоточность. Присутствует выборка потоков от 1 до 150, этого вполне достаточно.
4. Поиск. Добавил поиск дабы спарсить больше, чем нам позволяет Mail. Дело в том, что Mail показывает всего 10к участников, если мы ничего не ищем. Но, если мы ищем, например, по доменам их, то это ограничение можно обойти в 4 раза. Вообще, весь алгоритм я не знаю, но добавил 4 домена для вас, также, можете сами искать по параметру любому, разбирайтесь.
Вроде, про всё рассказал.
[HIDEPL="100,50"]
Скачать - https://yadi.sk/d/r7K7DEbB3H7Doh
VT - https://virustotal.com/ru/file/9c72...bfd4a98e7ae1a3b756207c53/analysis/1492537494/
[/HIDEPL]
Будут идеи - пишите.
Спасибо за внимание.
Прошлую тему удалили из-за авторизации в ПО через форум, сказали убрать, убрал.
Хоть бы описание оставили, придётся снова писать)
В общем, попросили сегодня сделать парсер почт из групп Mail.Ru, сделал.
В программе нужна авторизация через mail.ru, она является обязательной. Также, сам аккаунт mail.ru должен присутствовать в Моём Мире от Mail, это тоже обязательно.
1. Ссылка. Вставляем мы ссылку на группу так, чтобы не было после идентификатора группы НИ-ЧЕ-ГО, ни слэшей, ни ещё чего-либо, совсем ничего, это важно.
2. Прокси. Есть возможность подключить прокси 1 из 3 типов (HTTP/S, SOCKS 4, SOCKS 5), дабы избежать временной блокировки.
3. Многопоточность. Присутствует выборка потоков от 1 до 150, этого вполне достаточно.
4. Поиск. Добавил поиск дабы спарсить больше, чем нам позволяет Mail. Дело в том, что Mail показывает всего 10к участников, если мы ничего не ищем. Но, если мы ищем, например, по доменам их, то это ограничение можно обойти в 4 раза. Вообще, весь алгоритм я не знаю, но добавил 4 домена для вас, также, можете сами искать по параметру любому, разбирайтесь.
Вроде, про всё рассказал.
[HIDEPL="100,50"]
Скачать - https://yadi.sk/d/r7K7DEbB3H7Doh
VT - https://virustotal.com/ru/file/9c72...bfd4a98e7ae1a3b756207c53/analysis/1492537494/
[/HIDEPL]
Будут идеи - пишите.
Спасибо за внимание.