KonyvRadarBot
A KonyvRadarBot a KönyvRadar gyűjtőprogramja. Magyar könyvkiadók nyilvános oldalairól gyűjti össze a tervezett, előrendelhető és frissen megjelent könyvek adatait (cím, szerző, ISBN, megjelenési dátum, ár), és a könyvek adatlapjáról mindig a kiadó oldalára linkel.
Hogyan működik
- Kiadónként hetente legfeljebb kétszer jár (kedden és pénteken reggel).
- Egyszerre egy kérést küld egy domainre, a kérések között legalább 3 másodpercet vár.
- Betartja a robots.txt-t; a tiltott útvonalakat nem kéri le.
- Bot-védelem vagy ellenőrző oldal esetén leáll, és nem próbálja megkerülni.
- Nem használ böngészőt, nem tölt le képeket tömegesen, és nem jelentkezik be.
Letiltás, kapcsolat
A robots.txt-ben a KonyvRadarBot user-agentre vonatkozó szabályt követjük. Ha kiadóként kérdésed van, vagy nem szeretnéd, hogy az oldaladról gyűjtsünk, írj nekünk: modulabspro@gmail.com. A kérést a következő futás előtt teljesítjük.