Massendaten ständig aktualisieren

[Bummi]

Noch ein Vorschlag:
Du schießt alles in eine Stored Prozedure rein
die fährt dann ein "Pseudocode"

Code:

If Exists(Select * from Tabelle where id=@ID)
  Update Tabelle set a=@,b=@b ... where id=@ID
else
  Insert into Tabelle (id,a,b,..) Values (@id,@a,@b..)

[Piro]

@Bummi: Verliere ich dann aber nicht an Geschwindigkeit. Er führt dann jedesmal ein INSERT oder UPDATE aus.

In meinem Code habe ich nur einmal ein INSERT welches dann nur noch mit Parametern arbeitet und das UPDATE wird immer wieder neu erstellt und verwendet.

Wo ist der Vorteil einer Stored Prozedure? Sorry für die Frage.

Mal was anderes kann ich die UPDATE Routine nicht wie die INSERT vor die Schleife mit einer Variablen für die ID legen? Weißm leider nicht wie das gehen soll.

[Bummi]

Er führt ein Insert aus für das was noch nicht drin ist, das soll eh so sein.
Ob das Update schneller ist oder die Überprüfung ob ein Update nötig ist und dann gegf. ein Update durchzuführen müsste man evaluieren, ich denke der Unterschied wird marginal ausfallen.
Der Vorteil liegt bei von mir beschreibenen Möglichkeiten darin daß Du mit dem Minimum an Dattentransfer auskommst, die SQL's innerhalb des Servers, vor allem bei Massenoperationen sind ja um Welten schneller.
Ich persönlich würde die erste Variante vorziehen, hier vielleicht sogar aus der Echttabelle löschen wo die ID in der Hilfstabelle vorhanden ist und dann die komplette Hilfstabelle reinschießen.

Zitat:

Wo ist der Vorteil einer Stored Prozedure?

Das die komplette Datenmanipulation da stattfindet wo die Daten im benötigten Format vorliegen, keine Transfer übers Netz, keine hin und her Wandlung durch Treiberschichten, Delphiklassen etc.

[jobo]

bei solchen Datenmengen (und wahrscheinlich wird es nicht weniger) würde ich es per Linked Server CSV versuchen.

Also Datei auf den Server kopieren, verdrahten (linken) und dann reines SQL oder auch per Stored Proc falls notwendig. Schneller wirst Du es mit keinem Clientprogramm hinbekommen.

hier ist ein link mit handlichen Anweisungen:
http://forums.databasejournal.com/sh...ad.php?t=38583

Weiß aber nicht, ob das lizenztechnisch in jedem ms sql server drin ist.

Gruß, jo

[Piro]

Danke an alle für die großartigen Antworten. Sie haben mir sehr geholfen.

Ich habe derzeit 3.500 Datensätze die ich mit INSERT und UPDATE (mit Parameterübergabe) in DB schiebe.
Das Ganze dauert 20 Sekunden und ist völlig ausreichend.

Vielen Dank nochmal. Super Forum.
Gruß, Sven

[RWarnecke]

Hallo zusammen,

eine reine Verständnisfrage. Wäre für den Abgleich und das Einfügen der Daten in die Datenbank eine Stored Procedure besser geeignet ? Bei der Variante in Beitrag #1 erzeugt doch zu viel Traffic, da immer die Anfragen und das Ergebnis zwischen Datenbankserver und der Anwendung hin und her transpüortiert werden müssen.

Soweit ich es weiß kann der MS SQL-Server doch Stored Procedure.

Edit:
Ich würde für die Update-Anweisung und für die Select-Anweisung kein QuotedStr benutzen sondern Parameter verwenden. Ist aus meiner Sicht etwas übersichtlicher.