Torna indietro   Hardware Upgrade Forum > Software > Programmazione

Psychonauts 2: la psicologia incontra il gaming
Psychonauts 2: la psicologia incontra il gaming
Dopo anni di attesa e di infiniti posticipi, l'attesissimo titolo di Tim Schafer è finalmente disponibile. Ed è stato accolto a braccia aperte dalla community dei giocatori con una valutazione "Estremamente positiva" su Steam
Samsung Galaxy Watch4: è lui il miglior smartwatch per gli Android! La recensione
Samsung Galaxy Watch4: è lui il miglior smartwatch per gli Android! La recensione
Il mondo degli smartwatch è capitanato dagli Apple Watch che non mollano la presa del primo posto nelle vendite. Samsung però sa il fatto suo e il nuovo Galaxy Watch4 si conferma ancora la migliore alternativa al watch di Apple. Ecco il motivo nella nostra recensione. 
Un viaggio in Tesla dal nord alla Sicilia, senza Supercharger e spendendo 50 euro
Un viaggio in Tesla dal nord alla Sicilia, senza Supercharger e spendendo 50 euro
Percorrere l'Italia da nord a sud in 11 giorni, usando una Tesla Model 3 Long Range senza mai ricaricare ad un Supercharger? E' possibile, nonostante la diffusione delle soluzioni di ricarica pubbliche non così capillari come vorremmo. Ecco il racconto delle mie vacanze: 4.000km in elettrico
Tutti gli articoli Tutte le news

Vai al Forum
Rispondi
 
Strumenti
Old 15-07-2021, 08:19   #1
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 45
[RETI] Web spider, da indirizzo IP a hostname raggiungibile da barra web indirizzi

Sto sto guardando questo programmino. https://github.com/eywu/goodbots Dato un indirizzo ip mi fa il reverse dns lookup. Quindi echo "203.208.60.1" | ./goodbots mi restituisce crawl-203-208-60-1.googlebot.com ma mettendolo nella barra degli indirizzi ottengo pagina non raggiungibile perchè?
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 10:31   #2
wingman87
Senior Member
 
Iscritto dal: Nov 2005
Messaggi: 2670
Il fatto che un ip abbia un hostname non implica che esso abbia anche un servizio web attivo, potrebbe avere altri servizi o potrebbe non essere accessibile se non sotto particolari condizioni (ad esempio per via di un filtro IP).
wingman87 è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 12:00   #3
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 45
Ok grazie. Vorrei però implementare uno web spider che fa il crawl a partire da delle keywords. Come potrei fare? Avevo optato per provare una serie di indirizzi ip e fare il reverse dns lookup ma come abbiamo detto non necessariamente mi restituisce un indirizzo web attivo quel indirizzo IP. L' alternativa quale può essere?
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 12:10   #4
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 45
Inoltre tutti i crawler visti fino ora da me chiedono di partire da una lista di urls. Ma a me serve recuperare questa lista di urls. Esiste un database di domini che posso sfruttare? I dns server fanno questo lavoro ma come si interrogano per ottenere la lista di urls?
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 12:23   #5
misterx
Senior Member
 
Iscritto dal: Apr 2001
Città: Milano
Messaggi: 3541
i vari comandi ping e nslookup fanno la stessa cosa
misterx è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 13:43   #6
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 45
Con nslookup posso recuperare un nome di dominio registrato .it?
cioè *.it un comando che lista tutti i domini "it" registrati.

Oppure avevo pensato di creare un generatore di stringhe di esempio "acidfrder".it e controllare con un servizio web wiktionary se acidfrder è una parola italiana. E formare cosi un url da registrare nella lista urls. Ci sono altre possibilità?

Ultima modifica di zabnicola : 15-07-2021 alle 13:50.
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 18:40   #7
misterx
Senior Member
 
Iscritto dal: Apr 2001
Città: Milano
Messaggi: 3541
non ho capito se vuoi conoscere (enumerare) tutti i siti .it
misterx è offline   Rispondi citando il messaggio o parte di esso
Old 15-07-2021, 19:35   #8
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 45
Quote:
Originariamente inviato da misterx Guarda i messaggi
non ho capito se vuoi conoscere (enumerare) tutti i siti .it
Si mi interessare elencare tutti i siti .It. Penso che un registro di domini abbia la lista dei siti It, ma non la forniscono pubblicamente che io sappia.
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 17-07-2021, 16:11   #9
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 45
Nessuno?
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 18-07-2021, 15:04   #10
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 45
Ho creato il generatore di stringhe. Ma mi occorre un servizio rest api per fare il check della parola generata. Conoscete qualche servizio restfull api di dizionario italiano? ho trovato questo ma non so quante parole possiede.
https://dictionaryapi.dev/
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 18-07-2021, 17:43   #11
misterx
Senior Member
 
Iscritto dal: Apr 2001
Città: Milano
Messaggi: 3541
non ho capito cosa stai facendo o almeno: hai costruito un generatore di parole e vuoi testare con queste se esiste il sito relativo?

esempio:

abcd.it
misterx è offline   Rispondi citando il messaggio o parte di esso
Old 18-07-2021, 19:03   #12
zabnicola
Member
 
Iscritto dal: Nov 2020
Messaggi: 45
Posso postare il codice se volete. Si si, ho generato delle stringhe abcdef lunghe 6 caratteri e le sto provando se ce un corrispettivo url valido. Pero' mi servirebbe un dizionario di parole italiane da scaricare che è meglio partire da quelle. Dove le trovo?
E' per un lavoro di web crawler.
zabnicola è offline   Rispondi citando il messaggio o parte di esso
Old 18-07-2021, 19:47   #13
misterx
Senior Member
 
Iscritto dal: Apr 2001
Città: Milano
Messaggi: 3541
molti siti usano sigle, quindi il dizionario della lingua italiana servirebbe a poco nulla. Meglio generare i nomi attraverso le combinazioni di lettere.
misterx è offline   Rispondi citando il messaggio o parte di esso
 Rispondi


Psychonauts 2: la psicologia incontra il gaming Psychonauts 2: la psicologia incontra il gaming
Samsung Galaxy Watch4: è lui il miglior smartwatch per gli Android! La recensione Samsung Galaxy Watch4: è lui il miglior s...
Un viaggio in Tesla dal nord alla Sicilia, senza Supercharger e spendendo 50 euro Un viaggio in Tesla dal nord alla Sicilia, senza...
Ghost of Tsushima: Director's Cut, le meraviglie di Iki su PS5 - Recensione Ghost of Tsushima: Director's Cut, le meraviglie...
Xiaomi 11T Pro, la ricarica da 120W è pazzesca ma non basta. La recensione Xiaomi 11T Pro, la ricarica da 120W è paz...
Onda Solare vince con l'Emila 4 LT la ca...
Radeon Software Adrenalin 21.9.2 pronti ...
Lotus rivela il nuovo telaio per le spor...
Cambium Networks: i nuovi access point W...
Star Wars: gli autori di Heavy Rain e De...
Le 10 canzoni dei videogiochi più ascolt...
Non solo Tesla perde il tettuccio: richi...
PayPal rinnova completamente la sua app ...
Far Cry 6 meglio su PC, niente ray traci...
Microsoft Italia e Reale Group insieme p...
Corsair M65 RGB Ultra disponibile anche ...
5G, dall'inizio della pandemia 288 attac...
Ilford ammicca verso i fotografi a pelli...
NASA Perseverance si scatta un selfie in...
Amazon ufficializza Kindle Paperwhite e ...
Opera Portable
Opera 79
Radeon Software Adrenalin 21.9.2 beta
Chromium
iTunes 12
PassMark BurnInTest Windows Edition
OCCT
Driver NVIDIA GeForce 472.12 WHQL
K-Lite Codec Pack Update
K-Lite Mega Codec Pack
K-Lite Codec Pack Full
K-Lite Codec Pack Standard
K-Lite Codec Pack Basic
LibreOffice 7.2.1
Avast! Free Antivirus
Tutti gli articoli Tutte le news Tutti i download

Strumenti

Regole
Non Puoi aprire nuove discussioni
Non Puoi rispondere ai messaggi
Non Puoi allegare file
Non Puoi modificare i tuoi messaggi

Il codice vB è On
Le Faccine sono On
Il codice [IMG] è On
Il codice HTML è Off
Vai al Forum


Tutti gli orari sono GMT +1. Ora sono le: 00:50.


Powered by vBulletin® Version 3.6.4
Copyright ©2000 - 2021, Jelsoft Enterprises Ltd.
Served by www2v