93578
28.06.2016, aktualisiert um 16:18:28 Uhr
1718
4
0
Vor - und Nachnahmen aus einer Textdatei löschen, die in anderen Textdateien vorhanden sind
Hallo,
ich habe folgendes Problem: ich habe eine Textdatei mit mehr als 30.000.000.000 Zeilen. In eingigen von diesen Zeilen (nicht in jeder!!!) stehen NUR Vor- und Nachnahmen von Mitarbeiter in 4 verschiedenen Variationen:
Nun soll ich diese personenbezogene Daten löschen. Meine Idee war: 2 neue txt-Dateien (eine mit Vornahmen und und eine mit Nachnahmen von allen Mitarbeiter) erzeugen. Danach sie mit der ersten Textdatei abgleichen und alle Zeilen mit Übereinstimmungen aus der ersten Texdatei löschen.
comm-Befehl brachte mir diesmal nichts. Wie kann ich so was für Linux realisieren??? Ein zusätzliches Problem dabei: es sind sowohl Klein-, als auch Großbuchstaben als Anfangsbuchstaben in Namen vorhanden (siehe Beispiel).
Danke,
Takeshi
ich habe folgendes Problem: ich habe eine Textdatei mit mehr als 30.000.000.000 Zeilen. In eingigen von diesen Zeilen (nicht in jeder!!!) stehen NUR Vor- und Nachnahmen von Mitarbeiter in 4 verschiedenen Variationen:
klaus.mustermann
Ingo Mustermann
Heinz-mustermann
olaf_MustermannNun soll ich diese personenbezogene Daten löschen. Meine Idee war: 2 neue txt-Dateien (eine mit Vornahmen und und eine mit Nachnahmen von allen Mitarbeiter) erzeugen. Danach sie mit der ersten Textdatei abgleichen und alle Zeilen mit Übereinstimmungen aus der ersten Texdatei löschen.
comm-Befehl brachte mir diesmal nichts. Wie kann ich so was für Linux realisieren??? Ein zusätzliches Problem dabei: es sind sowohl Klein-, als auch Großbuchstaben als Anfangsbuchstaben in Namen vorhanden (siehe Beispiel).
Danke,
Takeshi
Kommentieren
Teilen
Auf Facebook teilen
Auf X (Twitter) teilen
Auf Reddit teilen
Auf Linkedin teilenBitte markiere auch die Kommentare, die zur Lösung des Beitrags beigetragen haben
Kommentar vom Moderator tomolpi am 28.06.2016 um 19:04:10 Uhr
Geschlossen, neuer Thread ist hier: Vor- und Nachnamen mit einem bestimmten Muster aus einer Textdatei löschen
tomolpi
tomolpi
Content-ID: 308393
Url: https://administrator.de/forum/vor-und-nachnahmen-aus-einer-textdatei-loeschen-die-in-anderen-textdateien-vorhanden-sind-308393.html
Ausgedruckt am: 06.05.2025 um 18:05 Uhr
4 Kommentare
Neuester Kommentar
Danke für den Tipp.
Leider komme ich damit nicht weiter. Dort ist NUR 1 bestimmtes Merkmal vorhanden(192). In meinem Fall habe ich hunderte von verschiedenen Vor- und Nachnahmen. Außerdem ist Linux nicht meine Welt... ;-(
Leider komme ich damit nicht weiter. Dort ist NUR 1 bestimmtes Merkmal vorhanden(192). In meinem Fall habe ich hunderte von verschiedenen Vor- und Nachnahmen. Außerdem ist Linux nicht meine Welt... ;-(
Zitat von @93578:
Leider komme ich damit nicht weiter. Dort ist NUR 1 bestimmtes Merkmal vorhandne (192).
No there are multiple entries in the text file, all separated by a pipe symbol -> | !Leider komme ich damit nicht weiter. Dort ist NUR 1 bestimmtes Merkmal vorhandne (192).
Ok. Das funktioniert. 
Nun habe ich folgendes Problem:
Ich muss nur die oben genannten vier/acht Kombinationen aus Namen/Vornamen löschen:
Zeilen mit nur Namen oder Vornamen sollten nicht gelöscht werden. Und bei deinem Beispeil werden sie leider auch gelöscht. Außerdem befinden alle Vornamen und Nachnamen in 2 Dateien (Vorname.txt, Nachname.txt), weil es zu kompliziert ist alle mögliche Varianten aus Vor- und Nachnamen per Hand zu tippen.
Nun habe ich folgendes Problem:Ich muss nur die oben genannten vier/acht Kombinationen aus Namen/Vornamen löschen:
Name Vorname
Name_Vorname
Name.Vorname
Name-Vorname
Vorname Name
Vorname_Name
Vorname.Name
Vorname-NameZeilen mit nur Namen oder Vornamen sollten nicht gelöscht werden. Und bei deinem Beispeil werden sie leider auch gelöscht. Außerdem befinden alle Vornamen und Nachnamen in 2 Dateien (Vorname.txt, Nachname.txt), weil es zu kompliziert ist alle mögliche Varianten aus Vor- und Nachnamen per Hand zu tippen.
