CSV doppelte Zeilen löschen

[stefan4711 3]

nach Umlaute in powershell richtig darstellen, fündig schon, aber funktionierte alles nicht, teilweise wurde geschrieben, dass in Powershell das automatisch erfolgt, bei mir jedenfalls nicht

[cj_berlin 1.137]

Nix ist da automatisch. Du musst lernen, mit Encodings umzugehen. Je nach Herkunft der Textdateien und deren geplanter Verwendung, ist es ein nahezu bodenloses Fass. Aber in einfachen Fällen funktioniert das mit -Encoding. Eventuell musst Du auch schon beim Import die Codierung angeben.

[stefan4711 3]

ok, also ich hab jetzt in der Export Zeile einfach -Encoding Default  rangehängt, jetzt is alles so wie es sein soll

 

danke noch mal und

 

 

schönes Wochenende

[Sunny61 773]

vor 2 Stunden schrieb stefan4711:

Export Zeile einfach -Encoding Default  rangehängt, jetzt is alles so wie es sein soll

Und wenn jemand den Default umstellt, suchst Du wieder. Wenn Du UTF-8 willst, dann schreib es hin, alles andere kann irgendwann nicht mehr funktionieren.

[daabm 1.184]

Am 19.11.2021 um 18:01 schrieb cj_berlin:

ein nahezu bodenloses Fass

 

Ein Fass ohne Boden heißt Rohr

[cj_berlin 1.137]

vor 1 Minute schrieb daabm:

 

Ein Fass ohne Boden heißt Rohr

Also quasi Pipe?

[Mase_ 0]

Wie kommt Deine CSV zustande?

 

Scheint Massenverarbeitung zu sein und schreit förmlich nach SQL, wenn sich die Quelle geeignet anzapfen ließe.

 

Workaround:

Via VBA/VBS und einem ADOB.Recordset + SQL auf die CSV/Textdatei.

 

Ganz plump:

Excel | mit dem Assistenten Importieren | Duplikate entfernen

 

Bei Bedarf automatisieren. (behelfsmäßig auch mit dem Makrorekorder möglich)