[JAVA] Limite di elementi nelle collezioni di dati?

[banryu79]

Lim, puoi dirci che tipo di garbage collector stai usando?
Penso o il Parallel o il G1, sapere quale dei due sarebbe utile.

Comuque il problema della "frammentazione dell'heap" è un non-problema, se riferito al tuo caso, perchè al massimo dovresti esperire lunghe pause mentre il GC compatta l'heap. Non gli OutOfMemory. In teoria

@EDIT: Mi correggo. Il problema della frammentazione dell'heap dipende appunto dal GC in uso.
Ad esempio con il G1 non dovrebbe essere un problema, mentre col CMS lo è (perchè non compatta l'heap).

[Lim]

Originariamente inviato da banryu79

Lim, puoi dirci che tipo di garbage collector stai usando?
Penso o il Parallel o il G1, sapere quale dei due sarebbe utile.

Comuque il problema della "frammentazione dell'heap" è un non-problema, se riferito al tuo caso, perchè al massimo dovresti esperire lunghe pause mentre il GC compatta l'heap. Non gli OutOfMemory. In teoria

@EDIT: Mi correggo. Il problema della frammentazione dell'heap dipende appunto dal GC in uso.
Con il G1 non è un prblema, con il Parallel potrebbe esserlo, col CMS lo è.

Uso il Parallel (PS)...

[banryu79]

Originariamente inviato da Lim

Uso il Parallel (PS)...

In teoria il Parallel compatta l'heap:

Originariamente inviato da http://www.oracle.com/technetwork/java/javase/tech/g1-intro-jsp-135488.html

...
This evacuation is performed in parallel on multi-processors, to decrease pause times and increase throughput. Thus, with each garbage collection, G1 continuously works to reduce fragmentation, working within the user defined pause times. This is beyond the capability of both the previous methods. CMS (Concurrent Mark Sweep ) garbage collection does not do compaction. ParallelOld garbage collection performs only whole-heap compaction, which results in considerable pause times.

Potresti fare una prova usando il G1, che dovrebbe essere il GC di default per la VM in modalità server da Java 1.7 update 4, se non erro.
Che versione della piattaforma utilizzi?

@EDIT:

Originariamente inviato da come sopra

...
Recommended Use Cases for G1

The first focus of G1 is to provide a solution for users running applications that require large heaps with limited GC latency. This means heap sizes of around 6GB or larger, and stable and predictable pause time below 0.5 seconds.

Applications running today with either the CMS or the ParallelOld garbage collector would benefit switching to G1 if the application has one or more of the following traits.

-More than 50% of the Java heap is occupied with live data.
-The rate of object allocation rate or promotion varies significantly.
-Undesired long garbage collection or compaction pauses (longer than 0.5 to 1 second)

Qui, le opzioni da riga di comando per attivarlo e configurarlo:
http://www.oracle.com/technetwork/ja...html#G1Options

[Lim]

Originariamente inviato da banryu79

In teoria il Parallel compatta l'heap:

Potresti fare una prova usando il G1, che dovrebbe essere il GC di default per la VM in modalità server da Java 1.7 update 4, se non erro.
Che versione della piattaforma utilizzi?

@EDIT:


Qui, le opzioni da riga di comando per attivarlo e configurarlo:
http://www.oracle.com/technetwork/ja...html#G1Options

Uso la versione 1.7:
java version "1.7.0_09"
Java(TM) SE Runtime Environment (build 1.7.0_09-b05)
Java HotSpot(TM) 64-Bit Server VM (build 23.5-b02, mixed mode)

Ho fatto la prova che suggerivi, impostando il G1 tramite il comando -XX:+UseG1GC, ma non è cambiato nulla, ottengo un OutOfMemory esattamente come prima...

[banryu79]

Mmmm... allora non so che pesci pigliare.

Se non che tendenzialmente escluderei l'ipotesi: "ho l'OutOfMemoryError perchè lo spazio ci sarebbe ma l'heap è frammentato", e sarei più propenso per un "ho l'OutOfMemoryError perchè ho finito la memoria"

Lo so, sembra assurdo, visto i dati che hai riportato prima.

Nella speranza di poterti aiutare in qualche modo, ho trovato questo articolo:
http://javaspecialists.co.za/archive/Issue029.html

Potresti provare a prendere in prestito l'idea del MemoryTestBench la riportata e usarla per alcune prove sperimentali. Vedere se i risultati di quel bench sono congruenti con quelli che hai già verificato con altri strumenti.

[mone.java]

Alla fine com'è andata? Mi stavo appassionando..