Große XML Datensätze auswerten

[taveuni]

Zum Beispiel dieser SAX Parser hier. Nutze ich auch.

[Peter666]

Cool,

Danke, aber der scheint die Datei in den RAM zu lesen. Das ist bei den Größen die ich hier habe nicht realisierbar.

[taveuni]

Ups. habe erst jetzt gelesen 120 GB. Mein Gott.

Diesen hier hatte ich auch mal auf dem Radar.

Da steht unter anderem:

Code:

TXMLSeqParser (OXmlSeq.pas): Sequential DOM parser based on OXmlPDOM.pas.
Read huge XML files into the DOM sequentionally. This method combines DOM capabilities without the need to load the whole document at once.
OXmlSeq is even a little bit faster than OXmlPDOM.

[jobo]

Ich weiß es ist nicht, wonach Du gefragt hast, aber statt zu fragen, ob das auch helfen könnte, gleich der Vorschlag:
xml-twig-tools
Hilft dabei, große (XML) Dateien zu zerlegen (fachgerecht).

Unter Linux über Paketmanager installierbar, unter Windows vielleicht mit cygwin. Der Code ist glaub ich frei verfügbar, python wenn ich mich richtig erinnere.

[Peter666]

Danke, ich kann die aber nicht zerlegen. Zugriff darauf habe ich nur readonly. In C# gibt es den XMLReader der quasi den Stream liest und dir Element für Element ausgibt und man sich so durchhangelt.

[taveuni]

Zitat von Peter666:

Danke, ich kann die aber nicht zerlegen. Zugriff darauf habe ich nur readonly. In C# gibt es den XMLReader der quasi den Stream liest und dir Element für Element ausgibt und man sich so durchhangelt.

Eben das scheint Oxml auch zu können. Ist allerdings nicht gratis.

[Peter666]

Stimmt, ich hab das auch gerade gesehen. https://github.com/FMXExpress/Trolle...rce/OXML/units

Zum Testen reicht die Beta, den Rest muss El Jefe entscheiden.

Danke.