Doppelte daten aus TEXT-Datei entfernen

Hallo zusammen
ich habe ein grösseres Problem. Meine TXT-Datei ist ca 700’000K gross und hatmehrere 1000x den selben Eintrag drin stehen.
Dieser Eintrag muss raus aus der Datei. Wie kriege ich das hin, wenn überhaupt.

Für Eure Hilfe biin ich sehr dankbar.

Oliver

Hallo,

ich habe ein grösseres Problem. Meine TXT-Datei ist ca
700’000K gross und hatmehrere 1000x den selben Eintrag drin
stehen.

Geht es nur um einen Eintrag? Dann mit Suchen/Ersetzen. Suche den Eintrag und ersetze ihn mit nichts.

Cheers, Felix

Hallo Felix
nein der Eintrag kommt mehrere 1000 mal vor. mit ersetzten schafft das mein Rechner nie.

Oliver

TextFX von Notepad++
http://notepad-plus-plus.org/de/home

Gruß

Stefan

nein der Eintrag kommt mehrere 1000 mal vor. mit ersetzten
schafft das mein Rechner nie.

Hallo Oliver,

deine txt-Datei hat 700 MB?

Normalerweise ist eine eingebaute Funktion wie Suchen-Erstezen zigmal schneller als Vba.
Bringt natürlich nix wenn dein PC die Datei nicht öffnen kann.
Obwohl ich das gar nicht glaube.
Hast du deinem Rechner auch genug Zeit gegeben?

Sag mal die daten deines Rechners.

Gruß
Reinhard

Moin,

ich nehme mal an, du willst doppelte Zeilen entfernen. Betriebssystem Windows?

Einige diesbezüglich sehr effektice Linux-Werkzeuge gibt es auch in einer „Windows-Version“, z.B. die GNU-Utilities für Windows. Findest du u.a. hier:

http://www.heise.de/software/download/gnu_utilities_…

Probiere es dann mal mit „sort /U datei.alt > datei.neu“. Die Zeilen werden eingelesen und die doppelten Zeilen entfernt.

Mehr Möglichkeiten bietet das Unix Tool „sed“, von dem es auch eine Version für Win gibt.

http://gnuwin32.sourceforge.net/packages/sed.htm

Viel Erfolg

tf

Hallo zusammen
Besten Dank für all die guten Tipps. Ein Bekannter von mir hat mir das File mit dem Ultra Edit bereinigt.

Gruss