Pobieranie danych ze stron, po stronie serwera.

Jak dzialaja strony typu notanio-pl ? Chodzi mi szczegolnie o dwie rzeczy:

1. predkosc, wszystko odbywa sie (bardzo) szybko
2. fakt, ze serwisy te (przynajmniej niektore z nich) nie blokuja notanio.pl - Niby to w ich interesie, ale mimo wszystko spotkalem sie ze stronami, ktore blokuja dostep do danych, gdy zbyt czesto pobiera sie z nich informacje (zbyt wiel rzadan). Allegro, eBay itp. maja API, ale reszta nie... Wiec sie zastanwiam jak to jest zrealizowane.

Prywatne API. API, o którym się nie mówi głośno, a stanowi tylko umowę pomiędzy dwoma stronami (sklep-porównywarka).

Pobieranie całych stron cURL-em, albo podobnymi narzędziami, budowanie na tej podstawie bazy danych produktów, pilnowanie cen, nowości, opisów produktów itd. - byłoby cholernie nieefektywne i nikt przy zdrowych zmysłach tego nie robi.