vah-smile Сообщение 17/01/2011 23:50 Копия темы
Парсинг сайта Есть задача – спарсить даные сайта! Проблема в том, что для доступа к нужной информации нужно ввести логин и пароль. Где бы можно было бы прочесть о парсинге на доступном языке (как для "чайника")? Или, если есть уже готовое решение – буду очень признателен!

taurus_f Сообщение 18/01/2011 06:31 Копия темы
CURL

Infarch Сообщение 18/01/2011 07:54 Копия темы
Решений тут тьма – от ручной работы до мощных тулз типа www.visualwebripper.com/D...
Однако истина в том, что если для вас это одноразовая работа то лучше обратитесь к специалистам, ибо освоение инструментов потребует солидного времени. Я эти занимаюсь давно и знаю что это за работа :)

vah-smile Сообщение 18/01/2011 09:10 Копия темы
Меня сроки не поджимают и поэтому хочется научится делать это самому! Тем более, что спарсить даные я могу, но вот обойти авторизацию – не получается!

Насчет инструментов, то мне они не очень то и подойдут, так как я хочу сделать скрипт, который бы выполнялся 1 раз в неделю и заносил даные в мою БД. А доступную инфу как для новичка в этом деле – никак не могу найти!

Infarch Сообщение 18/01/2011 09:22 Копия темы
Инфа тут простая – запостить на сервер логин пароль, получить куки и с ними делать все следующие запросы. Это в кратце :) Ну а детали зависят от языка реализации. Я это делаю на Перл, с участием библиотек LWP::UserAgent & HTTP::Cookie. Вот курл еще тут советовали, вроде тоже умеет такое, хотя и не уверен. Если таки выберете Перл, то почитать можно тут: lwp.interglacial.com/ch11...