Szerintetek lehetséges folyamatos webscrape?

Persze hogy lehetséges, csak kellemetlenségekkel jár.

Ha változik a weboldala a disztibútorodnak, akkor frissítenes kell a scrapert rá. Ez annyira nem fejfájós, mert általában csak más elementeket kellene kiválasztanod, viszont ha nincs időd javítani rajta vagy nem veszed ezt észre (célszerű emailedre küldeni bizonyos error esetén automatikus értesítédt), akkor a weboldaladon napokig rossz infó szerepelhet.

Akkor leprogramozni nem lesz annyira triviális, mert egy eléggé megbízható kódot kellene írnod, hiszen sokat automatizálna és óránként cselekedne. Nyílván nem nehéz megoldani, de gondolom nem egy medior fejlesztő vagy.

Egyébként annyit tennék csak hozzá, hogy én adatbázisba mentenék, sőt szerintem ezzel bármilyen fejlesztő egyetértene. Az adatbázist pedig n időközönként chekolhatná a backend és ha kellene, akkor cselekedne. Lehet adatbázisba mentenéd azt az xls file-t, de akkor meg felesleges nem egyből a db-be menteni és köztes file-t generálni.