[VB6] Problemi di Memoria in Lettura File

[leadergl]

Ciao raga,
confido in un vostro aiuto...la situazione è questa:
devo aprire e manipolare un file decisamente grande, varia dai 30 agli 80 MB...ma in certi casi può essere anche più grande...il fatto è che non vorrei gravare troppo sulla memoria di sistema poichè già adesso, dove la mia applicazione apre il file (in forma binaria) e lo sistema in un variabile strutturata, l'occupazione di memoria è sugli 80MB...

come posso fare a manipolare questo file col minimo dispendio di memoria?

[71104]

parlando in termini Win32 puoi crearlo con FILE_FLAG_NO_BUFFERING oppure usare un File Mapping; non so come si facciano queste cose in Visual Basic.

[leadergl]

Originariamente inviato da 71104

parlando in termini Win32 puoi crearlo con FILE_FLAG_NO_BUFFERING oppure usare un File Mapping; non so come si facciano queste cose in Visual Basic.

ti ringrazio per la risposta

mi spiegheresti meglio entrambi i concetti?
(sembra molto interessante il "File Mapping"...anche perchè al momento ho notato che calcolare il Checksum16 di un File anche di 2 o 3 MB è un processo interminabile...)

[Massi91]

Originariamente inviato da 71104

parlando in termini Win32 puoi crearlo con FILE_FLAG_NO_BUFFERING oppure usare un File Mapping; non so come si facciano queste cose in Visual Basic.

per il FILE_FLAG_NO_BUFFARING ho pubblicato questa funzione api, anche se può essere un po' complicato accedervi dopo:

http://advpro.altervista.org/CreateFileUsage.php

[71104]

Originariamente inviato da leadergl

ti ringrazio per la risposta

mi spiegheresti meglio entrambi i concetti?
(sembra molto interessante il "File Mapping"...anche perchè al momento ho notato che calcolare il Checksum16 di un File anche di 2 o 3 MB è un processo interminabile...)

FILE_FLAG_NO_BUFFERING è un flag che passi alla funzione CreateFile (che non serve a creare fisicamente un file sul disco, bensì a creare in memoria un oggetto file con rispettivo handle usato per effettuare operazioni di IO su un file o pseudotale) che serve a specificare che tu non vuoi che il contenuto del file venga trasferito in un buffer di memoria; un File Mapping invece è un meccanismo estremamente potente che viene utilizzato anche internamente dal kernel di Windows per numerosi scopi e viene anche messo a disposizione del programmatore User Mode. si tratta di un tipo di kernel object che permette di gestire in maniera molto facile un'area di memoria virtuale situata solitamente sul disco; a quest'area di memoria puoi accedervi tramite un normalissimo puntatore (quindi si tratta di trasformare un file in una zona ad accesso random): se la parte a cui vuoi accedere (che si chiama View del File Mapping) in un determinato momento si trova sul disco ma non in memoria, il sistema operativo (grazie ai numerosi meccanismi per la gestione della modalità protetta) intercetta l'accesso all'indirizzo virtuale della View (il quale indirizzo al momento non può essere mappato su un vero indirizzo fisico), scrive la View in memoria fisica, mappa dovutamente gli indirizzi virtuali su quelli fisici e ti permette l'accesso.

alla fine quindi decidi tu cosa usare: se vuoi accedere al file in maniera sequenziale usa FILE_FLAG_NO_BUFFERING, se vuoi accedervi in maniera random usa un File Mapping.

[leadergl]

ti ringrazio per le ottime info...quello che io dovrei fare in sostanza (almeno questo è quello che mi preme adesso...x il resto lo vedo con calma) è calcolare il Checksum di un file...

in che modo posso sfruttare queste info per lo scopo?

[71104]

se devi calcolare il checksum allora l'accesso sequenziale penso sia sufficiente: semplicemente richiama CreateFile e tra i flag passagli FILE_FLAG_NO_BUFFERING; poi usa ReadFile per leggere singole parti del file una dopo l'altra (sequenzialmente) e poi fai il tuo calcolo. alla fine chiudi l'handle del file con CloseHandle (l'handle è il numero identificativo del file che ti viene restituito dalla CreateFile e che devi passare anche alla ReadFile e a qualsiasi altra funzione API che usa l'oggetto file).
per trovare la documentazione e i prototipi delle funzioni CreateFile, ReadFile e CloseHandle basta che guardi nella libreria MSDN (http://msdn.microsoft.com/library): cerca i nomi delle funzioni col motore di ricerca del sito.