PDA

View Full Version : Consigli per web scraping


sarmata
25-09-2020, 00:18
Ciao a tutti,

Perdonatemi se dico qualche castroneria. Premetto che uso per lavoro molto excel, ma mai fatto programmazione con VBA. Tanti anni or sono ( sigh! ), quando ero al liceo comprai un manuale di basic e feci qualche semplice programmino sul mio commodore 64.
Ho questa necessità: vorrei fare web scraping da un sito, in pratica vorrei interrogare questo sito in automatico e riportare i dati su excel ( al limite access se necessario, ma non lo conosco attualmente ) per analizzarli. Successivamente, con questi dati su excel, vorrei in automatico interrogare il sito, magari ad intervalli di tempo prestabiliti, ed avere delle risposte, sempre da riportare su excel.
Mi sapreste indicare:
1 ) un percorso ottimale, ovvero quali linguaggi userebbe un programmatore esperto
2 ) un percorso, definiamolo medio, senza tante pretese ma più che funzionale
3 ) il minimo necessario per arrivare alla soluzione, magari muovendomi esclusivamente con excel o access... è possibile, è necessario imparare VBA?

Considerate che ho già un lavoro, ma mi piacerebbe acquisire qualche conoscenza informatica per non dipendere da altri anche per minime necessità...

Grazie

DoctorT
25-09-2020, 12:26
per il web-scraping a medio livello potresti usare python ... in questa discussione https://www.hwupgrade.it/forum/showthread.php?t=2904053 ho fatto uno script in python per trasformare in .csv una tabella web.

però ho visto che ci sono file excel che caricano automaticamente dati da pagine web ... anche se non conosco la tecnica utilizzata credo che la strada più comoda da seguire sia quella.

zabnicola
16-11-2020, 19:30
Potresti usare dei servizi che gia fanno web scraping e successivamente leggere la pagina cosi ripulita per fare gli inserimenti nel foglio excel. Per lo meno cosi ottieni la soluzione.