Massendatenverarbeitung mit Java EE

Nach langer Zeit (fast 3 Wochen) füge ich hier mal wieder ein paar Neuigkeiten ein. Mein Beispielprogramm oder Fallstudie wie es ja korrekt in meiner Diplomarbeit heißen wird ist endlich fertiggestellt. Die letzte Hürde Transaktionssicherheit, die bei Datensätzen > 50.000 mit einem Speicherüberlauf Probleme machte habe ich durch Bean Managed Transaction lösen können. So kann nun eine Transaktion nicht mehr als 10.000 Datensätze ausführen, wodurch bei einem maximalen RAM von 500MB in der VM kein Speicherüberlauf mehr passiert.

Vom Programm selber werde ich hier noch mehr berichten, wenn ich dieses in meiner Diplomarbeit beschreibe und hier einige Auszüge daraus vorstelle. Zunächst stell ich hier jetzt die Auswertung meiner Testläufe online. Eine genaue Erklärung, wodurch sich die Zeiten bei den einzelnen Varianten ergeben, folgt dann mit den weiteren Berichten.

Hier mal ein schöner Vergleich des Speicherplatzbedarfs zwischen 100.000 Datensätzen, die in einer Transaktion in die Datenbank geschrieben werden und 100.000 Datensätzen, die in mehreren Transaktionen a` 5.000 Datensätze in die Datenbank geschrieben werden. Letzteres wurde über Bean Managed Transaction gelöst, wobei Ersteres natürlich nicht Container Managed Transaction sein muss.

Container Managed Transaction (100.000 pro 1 Transaktion):
Führt zu einem Speicherüberlauf!

Bean Managed Transaction (5.000 pro 1 Transaktion):
Führt zu keinem Speicherüberlauf!