Наши проекты:
Журнал · Discuz!ML · Wiki · DRKB · Помощь проекту |
||
ПРАВИЛА | FAQ | Помощь | Поиск | Участники | Календарь | Избранное | RSS |
[3.234.246.109] |
|
Сообщ.
#1
,
|
|
|
Программа по списку сохраняет страницы сайта cian.ru на ресурсе web.archive.org путем выполнения GET запроса:
http://web.archive.org/save/ссылка_на_сохраняемую_страницу После n-ой страницы cian.ru предлагает ввести рекапчу. Капчу можно разгадать через сервис антикапчи. На cian.ru ответ на капчу нужно отправить POST запросом: https://www.cian.ru/captcha/?redirect_url=h...://www.cian.ru/ g-recaptcha-response=[расшифровка капчи]&redirect_url=https://www.cian.ru/ Вопрос в том как отправить расшифровку капчи на cian.ru через web.archive.org, чтобы программа могла дальше продолжить сохранение страниц? Спасибо! |
Сообщ.
#2
,
|
|
|
Порыть интерфейс вебархива, мне кажется, иначе никак
|
Сообщ.
#3
,
|
|
|
Немного дополню вопрос:
"Руками" это сделать не получается, т.е. при появлении капчи cian возвращает HTTP 302... и web.archive.org переходит с требуемой страницы на страницу с капчей вот такого вида https://www.cian.ru/captcha/?redirect_url=h...://www.cian.ru/ но руками вести эту капчу когда она открывается через web.archive.org не получается т.к. она в этом случае отображается не корректно, вот так: http://web.archive.org/save/https://www.ci...://www.cian.ru/ поймать момент и отгадать капчу не проблема. Вопрос в том как отправить разгаданную капчу в cian.ru через web.archive.org? Проблема в том что web.archive.org работает с сохраняемыми сайтами через GET запросы а капча отправляется на cian.ru POST запросом. Т.е. возможно есть способ искуственно передать POST запрос в GET запросе т.е. так чтобы cian.ru "поверил" что web.archive.org разгадал капчу как-то так ... |
Сообщ.
#4
,
|
|
|
Ну сам посмотри, как можно хотеть, чтобы Сервер1 принял данные от Юзера, думая, что это данные от Сервера2?
Рой интерфейс вебархива. Возможно, они редиректят ПОСТ-ы; возможно, есть параметр в ГЕТ-е, который они переделают в ПОСТ. Но если они не предоставили такой возможности, то задача нерешаема. Добавлено Вот ты зафлудил его своим цианом, он еле открывается теперь... |