Torna indietro   Hardware Upgrade Forum > Software > Programmazione

Fujinon XF33mmF1.4R LM WR, standard di nuova generazione per il sistema Fujifilm X
Fujinon XF33mmF1.4R LM WR, standard di nuova generazione per il sistema Fujifilm X
Il nuovo standard "next-gen" Fujifilm si affianca allo storico 35mm, offrendo maggior risoluzione a tutta apertura, tropicalizzazione, maggior velocità e silenziosità nella messa a fuoco, a fronte di ingombri più elevati e prezzo di listino che sfiora gli 850 Euro.
Intel Core i9-12900K, prestazioni con Windows 11 e Windows 10 a confronto
Intel Core i9-12900K, prestazioni con Windows 11 e Windows 10 a confronto
Intel e Microsoft hanno lavorato gomito a gomito per far sì che le nuove CPU Alder Lake basate su architettura ibrida funzionino al meglio su Windows 11. Cosa succede se installiamo Windows 10? Abbiamo svolto di nuovo la nostra suite di test sul 12900K per vedere se le prestazioni cambiano in base al sistema operativo.
Forza Horizon 5: perché è il simcade perfetto
Forza Horizon 5: perché è il simcade perfetto
Abbiamo provato in profondità il nuovo "simcade" di Playground Games e Turn 10 Studios. Ecco le nostre impressioni di gioco e le prove sul nostro sistema di test con diverse schede video, insieme al confronto della grafica con la versione Xbox Series X
Tutti gli articoli Tutte le news

Vai al Forum
Rispondi
 
Strumenti
Old 15-07-2021, 09:19   #1
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 69
[RETI] Web spider, da indirizzo IP a hostname raggiungibile da barra web indirizzi

Sto sto guardando questo programmino. https://github.com/eywu/goodbots Dato un indirizzo ip mi fa il reverse dns lookup. Quindi echo "203.208.60.1" | ./goodbots mi restituisce crawl-203-208-60-1.googlebot.com ma mettendolo nella barra degli indirizzi ottengo pagina non raggiungibile perchè?
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 11:31   #2
wingman87
Senior Member
 
Iscritto dal: Nov 2005
Messaggi: 2674
Il fatto che un ip abbia un hostname non implica che esso abbia anche un servizio web attivo, potrebbe avere altri servizi o potrebbe non essere accessibile se non sotto particolari condizioni (ad esempio per via di un filtro IP).
wingman87 è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 13:00   #3
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 69
Ok grazie. Vorrei però implementare uno web spider che fa il crawl a partire da delle keywords. Come potrei fare? Avevo optato per provare una serie di indirizzi ip e fare il reverse dns lookup ma come abbiamo detto non necessariamente mi restituisce un indirizzo web attivo quel indirizzo IP. L' alternativa quale può essere?
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 13:10   #4
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 69
Inoltre tutti i crawler visti fino ora da me chiedono di partire da una lista di urls. Ma a me serve recuperare questa lista di urls. Esiste un database di domini che posso sfruttare? I dns server fanno questo lavoro ma come si interrogano per ottenere la lista di urls?
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 13:23   #5
misterx
Senior Member
 
Iscritto dal: Apr 2001
Città: Milano
Messaggi: 3561
i vari comandi ping e nslookup fanno la stessa cosa
misterx è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 14:43   #6
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 69
Con nslookup posso recuperare un nome di dominio registrato .it?
cioè *.it un comando che lista tutti i domini "it" registrati.

Oppure avevo pensato di creare un generatore di stringhe di esempio "acidfrder".it e controllare con un servizio web wiktionary se acidfrder è una parola italiana. E formare cosi un url da registrare nella lista urls. Ci sono altre possibilità?

Ultima modifica di zabnicola : 15-07-2021 alle 14:50.
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 19:40   #7
misterx
Senior Member
 
Iscritto dal: Apr 2001
Città: Milano
Messaggi: 3561
non ho capito se vuoi conoscere (enumerare) tutti i siti .it
misterx è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 20:35   #8
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 69
Quote:
Originariamente inviato da misterx Guarda i messaggi
non ho capito se vuoi conoscere (enumerare) tutti i siti .it
Si mi interessare elencare tutti i siti .It. Penso che un registro di domini abbia la lista dei siti It, ma non la forniscono pubblicamente che io sappia.
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 17-07-2021, 17:11   #9
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 69
Nessuno?
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 18-07-2021, 16:04   #10
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 69
Ho creato il generatore di stringhe. Ma mi occorre un servizio rest api per fare il check della parola generata. Conoscete qualche servizio restfull api di dizionario italiano? ho trovato questo ma non so quante parole possiede.
https://dictionaryapi.dev/
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 18-07-2021, 18:43   #11
misterx
Senior Member
 
Iscritto dal: Apr 2001
Città: Milano
Messaggi: 3561
non ho capito cosa stai facendo o almeno: hai costruito un generatore di parole e vuoi testare con queste se esiste il sito relativo?

esempio:

abcd.it
misterx è offline   Rispondi citando il messaggio o parte di esso
Old 18-07-2021, 20:03   #12
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 69
Posso postare il codice se volete. Si si, ho generato delle stringhe abcdef lunghe 6 caratteri e le sto provando se ce un corrispettivo url valido. Pero' mi servirebbe un dizionario di parole italiane da scaricare che è meglio partire da quelle. Dove le trovo?
E' per un lavoro di web crawler.
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 18-07-2021, 20:47   #13
misterx
Senior Member
 
Iscritto dal: Apr 2001
Città: Milano
Messaggi: 3561
molti siti usano sigle, quindi il dizionario della lingua italiana servirebbe a poco nulla. Meglio generare i nomi attraverso le combinazioni di lettere.
misterx è offline   Rispondi citando il messaggio o parte di esso
 Rispondi


Fujinon XF33mmF1.4R LM WR, standard di nuova generazione per il sistema Fujifilm X Fujinon XF33mmF1.4R LM WR, standard di nuova gen...
Intel Core i9-12900K, prestazioni con Windows 11 e Windows 10 a confronto Intel Core i9-12900K, prestazioni con Windows 11...
Forza Horizon 5: perché è il simcade perfetto Forza Horizon 5: perché è il simca...
Gestire le spese dei dipendenti è facile e veloce con Qonto Gestire le spese dei dipendenti è facile ...
Canon EOS R3: (breve) prova a bordo pista con l'AF che riconosce i veicoli Canon EOS R3: (breve) prova a bordo pista con l'...
OPPO e il Cyber Monday 2021: ecco tutte ...
HONOR non si ferma con gli sconti: ecco ...
Ecco gli smartphone più venduti d...
Tesla va all-in in Cina: aggiornamento t...
Samsung smartphone: le promo Cyber Monda...
Moveaudio S108 e Moveaudio S180: portfol...
Nuove funzionalità per IBM RoboRX...
Internet casa, prezzi in calo dal 2020: ...
L'Australia pensa alla legge anti-troll:...
Vitesco lancia il motore elettrico a 48 ...
Marvel: un nuovo MMORPG in arrivo dai cr...
Windows 11 installato solo sullo 0,21% d...
Serie realme 9 pronta al debutto nel 202...
Corsair iCUE H150i ELITE LCD, quando un ...
Colpaccio di NIO: accordo con Shell per ...
SmartFTP
LibreOffice 7.2.3
7-Zip
Chromium
OCCT
K-Lite Codec Pack Update
K-Lite Mega Codec Pack
K-Lite Codec Pack Full
K-Lite Codec Pack Standard
K-Lite Codec Pack Basic
Opera Portable
Opera 81
Firefox Portable
NTLite
SiSoftware Sandra Lite
Tutti gli articoli Tutte le news Tutti i download

Strumenti

Regole
Non Puoi aprire nuove discussioni
Non Puoi rispondere ai messaggi
Non Puoi allegare file
Non Puoi modificare i tuoi messaggi

Il codice vB è On
Le Faccine sono On
Il codice [IMG] è On
Il codice HTML è Off
Vai al Forum


Tutti gli orari sono GMT +1. Ora sono le: 15:09.


Powered by vBulletin® Version 3.6.4
Copyright ©2000 - 2021, Jelsoft Enterprises Ltd.
Served by www3v