Insert Optimierung

[mkinzler]

http://zeos.firmos.at/
http://www.delphi-treff.de/tutorials...zsqlprocessor/

[IBExpert]

kleiner Tip:

wenn es wirklich um gleichartige einfache inserts geht, dann sparst du eine Menge zeit über execute block
d.h.statt jedes insert statement mit execute/execsql senden stellt du dir deine inserts in einem Block
zusammen.

Code:

execute block
as
begin
  insert into tbl(id,txt) values (1,'A');  
  insert into tbl(id,txt) values (2,'B');  
  insert into tbl(id,txt) values (3,'C');
  --...
  insert into tbl(id,txt) values (26,'Z');
end

das kannst du dann mit den meisten t*query oder T*sql Komponenten als ein Befehl
mit execsql zum Server senden. So einen Block kann bis zu 32k lang sein, d.h. es
passen reichlich inserts in einen Befehl.

Über external files zu gehen ist zwar noch schneller, aber setzt voraus, das dein
Firebird Client und der Firebird Server auf einen gemeinsamen Festplattenbereich
zugreifen können, das ist nicht immer gewünscht.

Ab einer gewissen Anzahl parametern ist die Parametrisierung von statements eher langsamer
als schneller, und man sollte wissen, das bei o.a. Verfahren ca. 10 Datenpakete auf TCP/IP
Ebene zwischen Server und Client hin und her geschickt werden, bei 26 Einzelstatements
kommst du parametrisiert auf geschätzt mindestens 200 Datenpakete. Bei jedem Datenpaket
musst du immer die Latenzzeit mit einrechnen (wie lange braucht ein Ping).

Je mehr Records und je mehr Parameter, um so mehr lohnt sich das execute block verfahren!

Execute block ist seit Firebird 2 Standard und hat nichts mit execute ibeblock zu tun, was man
nur in IBExpert Tools nutzen kann.

[Franzelchen]

Zitat von IBExpert:

kleiner Tip:

wenn es wirklich um gleichartige einfache inserts geht, dann sparst du eine Menge zeit über execute block
d.h.statt jedes insert statement mit execute/execsql senden stellt du dir deine inserts in einem Block
zusammen.

Code:

execute block
as
begin
  insert into tbl(id,txt) values (1,'A');  
  insert into tbl(id,txt) values (2,'B');  
  insert into tbl(id,txt) values (3,'C');
  --...
  insert into tbl(id,txt) values (26,'Z');
end

Alle 35000 Datensätze, deren Zahl auf Dauer wächst, in ein oder zwei derartiger Blöcke, also 35000 einzelne Inserts... oder verstehe ich das falsch?
Wie wird dann ein solcher Block in Delphi eingebunden?

[himitsu]

Ist doch praktisch sowas ähliches, wie mehrere Inserts zusammen, nur in einem anonymen Block verpackt.

Von der Größe des SQL-Statements her könntest du ja nochmal Folgendes probieren, mit der nun neu bekannten SQL-Komponente.

Code:

insert into tbl(id,txt) values (1,'A'), (1,'A'), (1,'A'), (1,'A');

Und wenn die Übertragung der Parameter soviel frißt, bei der Übertagung, dann könnte man ja auch nochmal versuchen keine Parameter zu nutzen.
Aber ob sich das wirklich positiv auswirkt, müßte man mal sehn ... schließlich muß man dann die Parameter selber "ordnungsgemäß" behandeln und das SQL-Statement muß jedesmal neu zusammengebaut und vorallem erneut geparst werden.

[Franzelchen]

Also ich habe große Schwierigkeiten mir 35000 und mehr Insert befehle in einem Block vorzustellen.
Kann mir zum Thema execute Block jemand Einführungsliteratur nennen?

[mkinzler]

Ein execute block ist eine SP, die inline deklariert wird. Es ist also SQL/PL möglich. Bei einfachen Inserts sollte aber eine normale parametrisierte Insert-Abfrage ausreichen. Auch hier kannst du die Commits blockweise ausfügren.

[Franzelchen]

Zitat von mkinzler:

Ein execute block ist eine SP, die inline deklariert wird. Es ist also SQL/PL möglich. Bei einfachen Inserts sollte aber eine normale parametrisierte Insert-Abfrage ausreichen. Auch hier kannst du die Commits blockweise ausfügren.

SP ist eine stored procedure,
inline ist ???
SQL/PL heißt ???

Warum müssen die Antworten komplizierter sein als die Fragen, welche man versucht zu stellen.

Ich weiß ich bin Anfänger und sollte mich um die Grundlagen selber kümmern. Dennoch, wozu ist das Forum da, wenn es keine Anfänger gäbe, sondern nur Fachleute?