sed-Wissen aus der Praxis für Noobs und Geeks

[3PO]

Hallo zusammen,

Code: Select all

sed 's/ABC/123/g' test.txt

ersetzt alle "ABC" durch "123" in der Datei test.txt.
Aber wie mache ich das, wenn ich "ABC" durch "123" nur in den Zeilen ersetzen will, die mit "XYZ" beginnen?

[Finswimmer]

$cat 1
ABC
ABC
XYZ ABC
ABC

[21:39:45]|[tobi@tobi-desktop]|/tmp
$sed -e '/^XYZ.*/s/ABC/123/g' 1
ABC
ABC
XYZ 123
ABC

[3PO]

THX @ Finswimmer,

Code: Select all

sed -e '/^XYZ.*/s/ABC/123/g'  test.txt

Funktioniert soweit, nur leider habe ich dann die Ausgabe nur auf der Konsole, die "test.txt" bleibt aber unverändert.

[Max Steel]

sed -e '/^XYZ.*/s/ABC/123/g' test.txt > test.txt

[3PO]

Habe es selbst gefunden.

So gehts:

Code: Select all

sed -i -e '/^XYZ.*/s/ABC/123/g'  test.txt

[mrsteven]

sed -e '/^XYZ.*/s/ABC/123/g' test.txt > test.txt

Das ist gefährlich, weil zuerst die Datei test.txt durch die Shell geöffnet und geleert wird. Erst danach öffnet sed die nun leere Datei:

Code: Select all

stefan@mrsteven-mobil tmp $ cat << EOF > test.txt
> abcd
> efg
> hijk
> EOF
stefan@mrsteven-mobil tmp $ sed -e 's/abcd/ersetzt/' test.txt 
ersetzt
efg
hijk
stefan@mrsteven-mobil tmp $ sed -e 's/abcd/ersetzt/' test.txt > test.txt
stefan@mrsteven-mobil tmp $ cat test.txt 
stefan@mrsteven-mobil tmp $

...uncooles Ergebnis. Allgemein werden immer erst die Ein-/Ausgabeumleitungen ausgewertet (und damit evtl. Dateien geleert), bevor das Programm (in diesem Fall sed) selbst gestartet wird und eine Chance bekommt, an den Dateiinhalt heran zu kommen.

</klugscheiß>

[Max Steel]

ah okay. Danke war mir auch nicht bewusst ^^
Dann evtl besser sowass hier:
echo $(sed -e '/^XYZ.*/s/ABC/123/g' test.txt) > text.txt

oder doch lieber -i?

Edith:
HaltSTOPP!!! Ist auch Blödsinn Weil:

Code: Select all

$ echo "ABC
> ABC
> XYZ ABC
> ABC " > test
$ echo $(sed -e '/^XYZ.*/s/ABC/123/g' test)
ABC ABC XYZ 123 ABC

Also -i.

[manuels]

Willkommen zurück im "never-ending thread"!

Also, ich möchte in einem Javascript-Programm alle Property-Vorkommen der Variable db finden und durch einen Funktionsaufruf ersetzen.
Also z.B. folgende Ersetzungen:

Code: Select all

db.foo -> db.myFunc("foo")
db.bar -> db.myFunc("bar")
db.bla -> db.myFunc("bla")

Nicht ersetzt werden, sollen Funktionsaufrufe von db, z.B.

Code: Select all

db.someFunc()
db.anotherFunc("stringargument")
db.yetAnotherFunc({a: 3})

Ich krieg es aber schon nicht hin einen sed-Ausdruck zu Unterscheidung von Funktionen und Properties zu basteln.
Wieso klappt z.B. das hier nicht:

Code: Select all

db\.([a-zA-Z0-9]*\w*[^\)])

Um jeden Tipp dankbar!

Manuel

[Knieper]

en sed-Ausdruck zu Unterscheidung von Funktionen und Properties zu basteln.
Wieso klappt z.B. das hier nicht:

Code: Select all

db\.([a-zA-Z0-9]*\w*[^\)])

Wieso sollte es? Du liest 'db.' dann eine beliebige Anzahl alphanumerischer Zeichen, gefolgt von einer beliebigen Anzahl alphanumerischer Zeichen und dann ein Zeichen, das kein ')' ist.

Die negierte Zeichenklasse am Ende funktioniert nicht, was Du meinst ist ein negativer Lookahead, den es in sed nicht gibt (dafür in PCRE, Perl, Python...). Dein Problem würde ich momentan so formulieren: lies 'db.' merke Dir die alphanumerischen Zeichen dahinter '(\w+)', wenn danach kein alphanumerisches Zeichen oder eine Klammer kommt.

Code: Select all

>echo 'db.bar db.LaEnGER; db.foo("test") db.a' |  perl -pe 's/db\.(\w+)(?![(\w])/db.myFunc("\1")/g'
db.myFunc("bar") db.myFunc("LaEnGER"); db.foo("test") db.myFunc("a")

In sed müsstest Du Dir behelfen und alle möglichen Zeichen hinter den Variablen kennen, zB. ' ', ';' oder Zeilenende, diese erkennen und dann wieder anfügen:

Code: Select all

echo 'db.bar db.LaEnGER; db.foo("test") db.a' | sed -r 's/db\.(\w+)([ ;\n]|$)/db.myFunc("\1")\2/g'
db.myFunc("bar") db.myFunc("LaEnGER"); db.foo("test") db.myFunc("a")

[Necoro]

Code: Select all

db\.([a-zA-Z0-9]*\w*[^\)])

Also wenn du Properties matchen willst, sollte das wohl eher

Code: Select all

db\.\([-_a-zA-Z0-9]\+\)\( |$\)

Da sed leider keine "Negative Lookaheads" unterstützt, hab ich jetzt Property als "zusammenhängenden String aus -_a-zA-Z0-9, auf den ein Leerzeichen oder ein Zeilenende folgt" definiert. Evtl sollte man auch noch das "=" oder so aufnehmen. Außerdem ist wichtig, dass sed gruppierende Klammern als "\(\)" erwartet -- "()" würde die Zeichen Klammer-Auf Klammer-Zu matchen. (Außer du nimmst das "-r" was Knieper gerade oben benutzt hat ^^)

[3PO]

Nochmal ne Frage zu sed...

Mit "sed 's/^/foo_/'" kann ich am Anfang von jeder Zeile ein "foo_" einfügen.

Aber wie gehe ich vor, wenn ich "foo_" am Anfang aller Zeilen einfügen will, ausser(!) bei Zeilen, die z.B. mit einem Doppelpunkt beginnen?

[mv]

Aber wie gehe ich vor, wenn ich "foo_" am Anfang aller Zeilen einfügen will, ausser(!) bei Zeilen, die z.B. mit einem Doppelpunkt beginnen?

Code: Select all

sed -e '/^:/!{s/^/foo_/}'

[3PO]

1000 THX @ mv.

[3PO]

Aber wie gehe ich vor, wenn ich "foo_" am Anfang aller Zeilen einfügen will, ausser(!) bei Zeilen, die z.B. mit einem Doppelpunkt beginnen?

Code: Select all

sed -e '/^:/!{s/^/foo_/}'

Nur der Vollständigkeit halber.
Wie wäre denn der sed Befehl, wenn ich "foo_" wieder entfernen wollte?

So?

Code: Select all

 sed 's/foo_ *//'

[Knieper]

Code: Select all

's/^foo_//'

[Max Steel]

Mal eben eine Frage, und zwar habe ich die Ausgabe von grep samt filename.
Und möchte für die Weiterverarbeitung nur die Filenamen (ob mehrmals vorhanden oder nicht) weiterverwenden.
Wie lässt sich das am einfachsten machen (alle Filenamen haben die gleiche Struktur: f[0-9]*.txt
bsp:
f21292056.txt:From: <abc@abc.de>
Ab dem Filenamen ist der zweite Teil Variabel.

[firefly]

Mal eben eine Frage, und zwar habe ich die Ausgabe von grep samt filename.
Und möchte für die Weiterverarbeitung nur die Filenamen (ob mehrmals vorhanden oder nicht) weiterverwenden.
Wie lässt sich das am einfachsten machen (alle Filenamen haben die gleiche Struktur: f[0-9]*.txt
bsp:
f21292056.txt:From: <abc@abc.de>
Ab dem Filenamen ist der zweite Teil Variabel.

ist der doppelpunkt nach dem dateinamen auch immer vorhanden? Wenn ja könnte man auch was mit "cut" machen.

folgendes ungetestet bin gerade nicht an einem rechner mit ner unix shell

Code: Select all

echo "f21292056.txt:From: <abc@abc.de>" | cut -d':' -f0

[Max Steel]

ist der doppelpunkt nach dem dateinamen auch immer vorhanden? Wenn ja könnte man auch was mit "cut" machen.

folgendes ungetestet bin gerade nicht an einem rechner mit ner unix shell

Code: Select all

echo "f21292056.txt:From: <abc@abc.de>" | cut -d':' -f0

Jupp. der Doppelpunkt ist immer vorhanden (wie schon gesagt, ein Output von grep mit dateinamen).

Super so funktioniert das (ich weiß nicht ob das am Windows-unxutils-cut liegt aber ich musste -f1 auswählen, vll einfach ein Kompatibiltätsquatsch seitens Windows.)

[firefly]

Super so funktioniert das (ich weiß nicht ob das am Windows-unxutils-cut liegt aber ich musste -f1 auswählen, vll einfach ein Kompatibiltätsquatsch seitens Windows.)

Ne das mit -f1 kann schon passen, wie schon gesagt die beispielzeile hatte ich einfach aus dem kopf geschrieben, da ich aktuell keinen zugriff auf eine unix/linux shell habe.

[Max Steel]

Kann ich dann direkt wenn ich zuhause bin nachschaun (bin noch auf Arbeit)

[slick]

Ich bräuchte auch mal etwas Hilfe. Ich habe einen (eigentlich mehrzeiligen) Text in dem an irgendeiner Stelle eine bestimmte ID (in einem bestimmten Format) befindet. (Ein die ID umfliessender Text ist nicht zwangsläufig, der "Text" kann auch nur die ID selbst sein) Diese ID möchte ich gern extrahieren. D.h. Text rein, ID raus. Die ID besteht aus Komponenten mit fixer Länge, jedoch gibt es auch Abweichler. Eigentlich brauche ich somit zwei Code-Schnipsel. Einer der die ID exakt gemäß der fixen Längen extrahiert (und andere ignoriert) und eine weichere Version die auch IDs mit ungleich langen Komponenten findet, sofern das Muster stimmt.

Die ID setzt sich wie folgt zusammen (case-insensitiv)

YYMMDD-X-YYYYY-ZZZ

Dabei gilt:

YYMMDD - 6 stellige Datumsangabe [0-9]
X - einstelliger Buchstabe [A-Z]
YYYYY - 5 stelliger Wert [A-Z,0-9]
ZZZ - 3 stellige Zahl [0-9]

Teilweise ist die ID durch Leerzeichen vom Text getrennt, stellenweise aber auch um weitere Zeichen erweitert die ich nicht mit extrahiere möchte. z.b: Buchstaben davor oder dahinter (a, b). z.B. aYYMMDD-X-YYYYY-ZZZb.

Das waren die Angaben für die "strenge" Prüfung. Für die weichere Variante sehen die Regeln wie folgt aus:

NNNNNN-X-YYYYY-ZZZ

NNNNNN - n stelliger Zahlenwert [0-9], wobei sich die Länge durch die "umschliessenden" nicht-numerischen Zeichen ergibt
X - n stelliger Buchstabenwert [A-Z], wobei sich die Länge durch das umschliessenden Zeichen "-" ergibt
YYYYY - n stelliger Wert [A-Z,0-9], wobei sich die Länge durch das umschliessenden Zeichen "-" ergibt
ZZZ - n stellige Zahl [0-9], wobei sich die Länge durch die "umschliessenden" nicht-numerischen Zeichen ergibt

Auch hier gilt wieder, die ID könnte um anderen Zeichen ergänzt sein, die ich nicht möchte (a,b) : aNNNNNN-X-YYYYY-ZZZb.

[3PO]

Hallo Zusammen,

ich stehe mal wieder auf dem Schlauch, was sed angeht....

Das,

Code: Select all

sed -e 's/;.*$//'

löscht ja das ";" und alles nachfolgende in der Zeile.

Wie gehe ich aber vor, wenn ich folgendes machen will:

Lösche das ";" und alles nachfolgende in der Zeile und füge dafür ".abc" ein.

[mrsteven]

Code: Select all

sed -e 's/;.*$/.abc/'

Oder habe ich dein Problem falsch verstanden?

[3PO]

Ja, das wars, 1000 THX.

[3PO]

Hallo Zusammen,

kann sed eigentlich auch "von hinten" rechnen?

Ich bräuchte von jeder Zeile nur das siebte und das achte Zeichen, allerdings von hinten her gerechnet.

Geht so etwas mit sed?