Aufnahmen verschieben / Rückgabewert von cp bei "no space left"

clocker · 8. März 2006

Ich habe mir dieses Script zum Verschieben von Aufnahmen zusammengebastelt:

Bash

#!/bin/sh


REC="$1"
RECDIR=`dirname "$REC"`
RECNAME=`basename "$RECDIR"`
TARGET=/video0/"$RECNAME"


function move() {


  # Greift gerade etwas auf das Verzeichnis zu?
  for f in $(find "$REC" -name *.pid)
  do
    svdrpsend.pl MESG FEHLER: Aufzeichnung in Verwendung!
    exit 1
  done


  # Anlegen des Zielverzeichnisses
  mkdir "$TARGET"
  if [ ! -d "$TARGET" ]; then
    svdrpsend.pl MESG FEHLER: Zielverzeichnis konnte nicht angelegt werden!
    exit 1
  fi


  # Kopieren
  cp -r "$REC" "$TARGET"
  if [ $? != "0" ]; then
    svdrpsend.pl MESG FEHLER während des Kopierens!
    exit 1
  fi


  # Quellverzeichnis löschen
  rm -rf "$REC"
  rmdir "$RECDIR"


  # VDR-Aktualisierung
  touch /video0/.update


  # Quellverzeichnis nach dem Verschieben noch vorhanden?
  if [ -e "$REC" ]; then
    svdrpsend.pl MESG WARNUNG: Dateien kopiert, Originalverzeichnis konnte nicht entfernt werden.
  else    
    svdrpsend.pl MESG Verschieben erfolgreich ausgeführt.
  fi
}


move >/dev/null 2>/dev/null &

Alles anzeigen

Klappt auch ganz gut. Allerdings kann man Aufnahmen verlieren, wenn die Zielplatte fast voll ist, da nach
cp -r "$REC" "$TARGET"
trotz des Fehlers "no space left on device" der Rückgabewert $? == 0 ist. Fehler wird nicht erkannt -> Aufnahme nicht komplett kopiert -> Quellvideo gelöscht.
Noch mehr Ideen? Vorschläge?

knebb · 8. März 2006

Zitat

Original von clocker
Ich habe mir dieses Script zum Verschieben von Aufnahmen zusammengebastelt:

Warum nimmst Du ein cp, wenn Du doch verschieben (mv) willst?
mv löscht erst, wenn alles vollständig übertragen ist, dann brauchst Du Dich darum nicht mehr kümmern.

clocker · 8. März 2006

Naja, eigentlich hast du recht. Ich habe es erst auch so machen wollen. Aber dann hängt die Aufnahme im schlimmsten Fall halb hier und halb da. Und dann ist wieder Handarbeit angesagt, weil man nachschauen muss, welche Teile wo sind.
Außerdem will ich noch eine zweite Scriptvariante, die nur kopiert anstatt zu verschieben.

knebb · 8. März 2006

Zitat

Original von clocker
Naja, eigentlich hast du recht. Ich habe es erst auch so machen wollen. Aber dann hängt die Aufnahme im schlimmsten Fall halb hier und halb da.

Nö. Ich meine, mv löscht erst dann, wenn es ALLES hat sauber rüberkopieren können. D.h. ist der Rückgabewert != 0, kannst Du das Zielverzeichnis sorgenfrei löschen, da es nicht geklappt hat. Das Original sollte dann aber noch zu 100% da sein.

Ansonsten schau Dir mal rsync an, damit geht sowas auch sehr gut und kann vor allem auch auf abgebrochenen Teilen fix aufsetzen.

Toxic-Tonic · 8. März 2006

Dukannst vorher die Größe des Quell-Verzeichnis auslesen:

RECSIZE=$[$(du -c $REC|tail -n1|awk '{print $1}')/1024]

und den freien Platz auf dem Ziel-LW:

FREE=$[$(df $TARGET|tail -n1|awk '{print $4}')/1024]

Gruß

Toxic

clocker · 8. März 2006

Ich werde um die Größenabfrage nicht herumkommen, danke dafür.

knebb
Wie ich gerade getestet habe, ist es mit dem Busybox-mv meines LinVDR sogar noch viel schlimmer, als ich befürchtete. Es löscht die Quelle gnadenlos, egal, wie viel kopiert wurde. Ich komme um den cp-Befehl nicht herum.

knebb · 8. März 2006

Zitat

Original von clocker
Es löscht die Quelle gnadenlos, egal, wie viel kopiert wurde.

Ah. Gut, daß wir getestet haben

clocker · 8. März 2006

So, danke. Die Lösung sieht jetzt so aus:

Bash

#!/bin/sh


REC="$1"
TARGET="/video0"
RECDIR=`dirname "$REC"`
RECNAME=`basename "$RECDIR"`
TARGETDIR="$TARGET"/"$RECNAME"
RECSIZE=`du -c "$REC"|tail -n1|awk '{print $1}'`
FREE=`df "$TARGET"|tail -n1|awk '{print $4}'`


function move() {
  # Genug Platz?
  if [ "$RECSIZE" -gt "$FREE" ]; then
    svdrpsend.pl MESG FEHLER: Zu wenig freier Speicher!
    exit 1
  fi


  # Greift gerade etwas auf das Verzeichnis zu?
  for f in $(find "$REC" -name *.pid)
  do
    svdrpsend.pl MESG FEHLER: Aufzeichnung in Verwendung!
    exit 1
  done


  # Anlegen des Zielverzeichnisses
  mkdir "$TARGETDIR"
  if [ ! -d "$TARGETDIR" ]; then
    svdrpsend.pl MESG FEHLER: Zielverzeichnis konnte nicht angelegt werden!
    exit 1
  fi


  svdrpsend.pl MESG Verschiebe "$[$RECSIZE/1024]" MB


  # Kopieren
  cp -r "$REC" "$TARGETDIR"
  if [ $? != "0" ]; then
    svdrpsend.pl MESG FEHLER während des Kopierens!
    exit 1
  fi


  # Quellverzeichnis löschen
  rm -rf "$REC"
  # Falls Aufnahmeverzeichnis leer -> löschen
  rmdir "$RECDIR"


  # Aktualisierung für VDR
  touch "$TARGET"/.update


  # Quellverzeichnis nach dem Verschieben noch vorhanden?
  if [ -e "$REC" ]; then
    svdrpsend.pl MESG WARNUNG: Dateien kopiert, Originalverzeichnis konnte nicht entfernt werden.
  else    
    svdrpsend.pl MESG Verschieben erfolgreich ausgeführt.
  fi
}


move >/dev/null 2>/dev/null &

Alles anzeigen

Edit: Wenn man mehrere Aufnahmen gleichzeitig verschiebt, dürfte es aber wieder knallen.

Edit5:
Kleiner Workaround:

Code

# Läuft ein anderer Kopiervorgang?
  while (pidof cp >/dev/null); do
    sleep 5
  done

Das noch oben vor "Genug Platz?" reingesetzt, hält das Script so lange an, bis kein anderer Kopiervorgang mehr im Hintergrund läuft und legt dann erst los.
So, jetzt reicht's aber.

Gurkendieb · 8. März 2006

Verzeichnis erstellen solltest du mit "mkdir -p" .
Sonst knallt es bei einigen noch viel eher

clocker · 8. März 2006

Macht keinen Unterschied, da immer nur das Verzeichnis mit dem Aufnahmetitel angelegt wird. Beispiel:

Du willst dir
/mnt/server/Sendung/2006-03-01.20.10.50.99.rec
auf den Rechner holen.

Dann macht das Script daraus
mkdir /video0/Sendung

und danach
cp -r /mnt/server/Sendung/2006-03-01.20.10.50.99.rec /video0/Sendung

Also kein Problem.

PS: Die Änderung, die ich gepostet habe (die mit "pidof cp") muss natürlich VOR dem Abfragen des freien Speichers rein. Also auch vor FREE= usw. Also war es noch nicht ganz korrekt.

clocker · 16. März 2006

Ich habe das Script noch etwas verfeinert und erweitert:

Bash

#!/bin/sh


TARGET="$1"
REC="$2"


function move() {
  # Läuft noch ein anderer Kopiervorgang?
  while (pidof cp >/dev/null); do
    sleep 5
  done


  # Quellverzeichnis vorhanden?
  if [ ! -d "$REC" ]; then
    svdrpsend.pl MESG FEHLER: Quellverzeichnis nicht vorhanden!
    exit 1
  fi


  # Genug Platz?
  RECSIZE=`du -c "$REC"|tail -n1|awk '{print $1}'`
  FREE=`df "$TARGET"|tail -n1|awk '{print $4}'`
  if [ "$RECSIZE" -gt "$FREE" ]; then
    svdrpsend.pl MESG FEHLER: Zu wenig freier Speicher!
    exit 1
  fi


  # Greift gerade etwas auf das Verzeichnis zu?
  for f in $(find "$REC" -name *.pid)
  do
    svdrpsend.pl MESG FEHLER: Aufzeichnung in Verwendung!
    exit 1
  done


  # Anlegen des Zielverzeichnisses
  RECDIR=`dirname "$REC"`                  # /video0/server/sendung
  RECNAME=`basename "$RECDIR"`             # sendung
  TARGETDIR="$TARGET"/"$RECNAME"           # /video1/sendung
  mkdir "$TARGETDIR"
  if [ ! -d "$TARGETDIR" ]; then
    svdrpsend.pl MESG FEHLER: Zielverzeichnis konnte nicht angelegt werden!
    exit 1
  fi


  svdrpsend.pl MESG Verschiebe "$[$RECSIZE/1024]" MB...


  # Kopieren
  cp -r "$REC" "$TARGETDIR"
  if [ $? != "0" ]; then
    svdrpsend.pl MESG FEHLER während des Kopierens!
    exit 1
  fi


  # Anlegen der Symlinks in /video0
  DATADIR=`basename "$REC"`                # 0123.rec
  SYMLINKDIR=/video0/"$RECNAME"/"$DATADIR" # /video0/sendung/0123.rec
  if [ ! -d "$SYMLINKDIR" ]; then
    mkdir -p "$SYMLINKDIR"
    ln -s "$TARGETDIR"/"$DATADIR"/* "$SYMLINKDIR"/
  fi


  # Quellverzeichnis löschen
  rm -rf "$REC"
  # Falls Aufnahmeverzeichnis leer -> löschen
  rmdir "$RECDIR"


  # Aktualisierung für VDR
  touch /video0/.update


  # Quellverzeichnis nach dem Verschieben noch vorhanden?
  if [ -e "$REC" ]; then
    svdrpsend.pl MESG Dateien kopiert, Originalverzeichnis nicht entfernt.
  else    
    svdrpsend.pl MESG Verschieben erfolgreich ausgeführt.
  fi
}


move >/dev/null 2>/dev/null &

Alles anzeigen

Jetzt werden auch Symlinks in /video0 erstellt, wenn man die eigentliche Aufnahme nach /video1 verschieben lässt, so dass die Aufnahme korrekt im Aufzeichnungsmenü angezeigt wird.

Das Script speichert man als /usr/bin/moverec und fügt an seine reccmds.conf beispielsweise folgende Zeilen an:

Code

Verschieben auf lokale Platte: /usr/bin/moverec /video1
Verschieben auf Server: /usr/bin/moverec "/video0/Server"

Der erste Parameter ist somit das Ziel.

ata93606 · 29. August 2006

Ich habe genau so ein skript gesucht um einfach meine Aufnahmen auf meine USB-Festplatte zu verschieben.
Ich habe das Skript abgetippt.
Nachdem es das skript lief wollte ich dann die ersten aufnahmen auf meine USB-Platte verschieben. Nachdem ich für die ersten 3 Aufnahmen das skript gestartet hatte hatte ich dann auch prompt 3 kopieraufträge in der am laufen.
Wurde das mit dem überwachender ob schon kopierbefehle laufen schon überprüft ob es funktioniert?

MfG. ata93606

clocker · 29. August 2006

Wenn ich dich richtig verstanden habe, willst du wissen, ob das Script wirklich überprüft, ob andere Kopiervorgänge laufen?

Hier funktioniert es genau so.

Dafür ist dieser Part zuständig:

Code

...
# Läuft noch ein anderer Kopiervorgang?
  while (pidof cp >/dev/null); do
    sleep 5
  done
...

Das Script bleibt in der Schleife hängen, solange noch ein cp-Kommando läuft.

ata93606 · 29. August 2006

Dann habe ich da wohl ein tippfehler drinn. Bei mir hats nicht funktioniert

clocker · 29. August 2006

Tippfehler? Na, ich will doch hoffen, du hast das Script per Copy&Paste da oben rauskopiert. Speziell die Zeilen mit den Apostrophen und Akzenten sind nicht ohne. Immerhin sind ´ ` ' drei verschiedene Zeichen...

ata93606 · 29. August 2006

Der betroffene Rechner ist zu Hause und da habe ich nur Internet über modem und das auch nur in einem anderen Zimmer.
Das heist mit Nottbook ins internet (XP), Skript auf usb-stick abspeichern und dann auf den LINVDR-Rechner einspielen. da isses fat leichter abgetippt.

Aufnahmen verschieben / Rückgabewert von cp bei "no space left"

Jetzt mitmachen!

Teilen

Benutzer online in diesem Thema