Sortierprogramm

[KosMottchen]

huhu,

ich wollte gerne folgendes machen...
ein programm schreiben, wo ich eine txt datei laden kann (welche untereinander wörter mit sonderzeichen enthällt) und diese soll dann nach doppelten wörtern abgesucht werden und dann sozusagen als neue txt datei gespeichert werden, wo dann nicht mehr die doppelten wörter drin stehen, sondern halt jedes wort nur einmal.

wie stelle ich denn das am besten an?

im inet gibts zwar tools, aber da die txt datei gute 100 mb groß ist, kommen diese tools an ihre grenzen...

danke euch schonmal im vorraus

mfg kos