Datenbank Duplicates

[mkinzler]

Bei einem entsprechenden Index sollte das Upper() in der Abfrage nicht notwendig sein

[idefix2]

Zitat:

Angenommen ich füge diesen Index im nachhinein ein, werden dann die (jetzt neuen) Duplicates rausgeschmissen oder wie verhält sich das?

Ich würde eine neue Tabelle mit geeigneter Collation erstellen und die Werte der alten Tabelle mittels "Update or insert" Statement in die neue Tabelle einfügen, dann die alte Tabelle löschen und die neue Tabelle umbenennen. Dann sind die Duplicates weg.

[idefix2]

Zitat:

Bei einem entsprechenden Index sollte das Upper() in der Abfrage nicht notwendig sein

Das glaube ich nicht.
Ein Index wird von Firebird ja nur dazu verwendet, Abfragen zu beschleunigen, die zu dem Index passen. Bei der Abfrage selbst gibst Du aber keinen Index an, die Abfrage ist also erst einmal Indexunabhängig defniert. Kommt in der Abfrage kein UPPER vor und Du hast einen Index mit UPPER definiert, dann wird dieser Index für die Abfrage ganz einfach nicht verwendet, weil er ja nicht zur Abfrage passt.

[-187-]

Hm nachdem ich die Duplicates jetzt gefunden habe müsste ich diese noch löschen :)

Code:

SELECT UPPER(VORNAME) FROM NAMEN1 GROUP BY UPPER(VORNAME) HAVING (COUNT(*)>1)

Mein Anlauf war das SELECT Statement durch das DELETE Statement zu ersetzen aber dann bekomm ich die Fehlermeldung "Unknown token Upper".

Hat jemand einen Ansatz wie man duplicates aus einer DB löscht ?

[mkinzler]

SQL-Code:

delete from namen1 where id not in ( SELECT MIN(ID), UPPER(VORNAME) FROM NAMEN1 GROUP BY UPPER(VORNAME));

[DeddyH]

Nur so ein Gedanke (ID soll der PK sein):

SQL-Code:

DELETE FROM NAMEN1
WHERE ID IN (
  SELECT ID 
  FROM NAMEN1 
  GROUP BY UPPER(VORNAME) 
  HAVING (COUNT(*)>1)
)

[edit] Das von Markus ist besser, meins würde ja alle Datensätze löschen, die doppelt vorgekommen sind. [/edit]

[-187-]

Hm ich habe kein Feld "id" ... Ist das zwingend notwendig ?

Reicht es nicht wenn ich das zu bearbeitende Feld betrachte ?

[mkinzler]

Nein, denn du brauchst ja ein Kriterium, um die datensätze zu unterscheiden

[-187-]

Hm Ok also brauche ich jetzt ein zusätzliches Feld mit einem Index Typ, Richtig?

Code:

ALTER TABLE NEWTABLE ADD CONSTRAINT PKINDEX_IDX PRIMARY KEY (ID);

Wie sieht so ein Index dann aus? Ist das eine vorlaufende Nummer von 0,1,2,3 .. usw?

[mkinzler]

Eine Tabelle sollte immer einen PK haben ( am Besten einen syntetischen; ist aber Geschmacksache).
In deinem Fall würde ich eine neue Tabelle erzeugen ( mit ID mit autoinc) und dann die Werte von der "alten" in die neue Kopieren:

SQL-Code:

Insert into Name ( Vorname) select UPPER(VORNAME) FROM NAMEN1 GROUP BY UPPER(VORNAME);