Witam,
mam taki problem, chcialem zcrawlowac sobie troche danych o filmach z filmweb.pl jednak mam ogromny problem. Mianowicie jesli wyczysci sie dane przegladarki i wejdzie pod tenze adres wyskakuje strona "posredniczaca" z reklama, trzeba albo odczekac 30 sec albo nacisnac na link przekierowujacy dalej. Oczywiscie crawler kiedy otwieram strone curlem zostaje na tej stronie posredniczacej.
Myslalem ze strona zapisuje sobie jakies coockiesy czy sie juz na niej bylo czy tez nie ale z moich badan wychodzi ze to nie coockiesy ani tez nie coockiesy flashowe ktore chcialem sobie "podrobic" na potrzeby crawlera zeby nie trafial ciagle na strone posredniczaca.
Czy bedzie ktos tak mily i da mi jakas wskazowke jak przejsc przez ta strone posredniczaca crawlerem? Bede niezmiernie wdzieczny za pomoc.
Pozdrawiam