Doppelpunkte in Dateinamen

cduerr · 18. Mai 2024

Hallo,

immer wieder werden durch das Schema F Doppelpunkte im Aufnahmenamen verwendet, die dann dafür sorgen, dass ich die Datei über die NFS-Freigabe nicht vernünftig schneiden kann.

Beispiel:

MacGyver: Jagd nach dem Schatz von Atlantis~2024.05.18-18:20-Sat

(da sind sogar zwei drin; kommt von epgsearch eine geplante Serienaufnahme, obwohl es einer der beiden Filme ist, aber egal, ist ja nur ein Beispiel).

Natürlich schaut der Dateiname korrekt aus, er wird mit #3A umschrieben.

Gibt es eine Möglichkeit, wie man das generell unterbindet oder was muss ich genau tun, damit ich korrekt schneiden kann (mit Skript)?

Mein Skript (aus dem Forum, bereits leicht angepasst) könnte ich anhängen, wenn gewünscht. Mir wäre es eigentlich lieber, wenn solche kritischen Zeichen gar nicht erst ins Dateisystem kämen (weil man den Terz mit anderen System bekommt).

jrie · 18. Mai 2024

vdr --vfat

cduerr · 19. Mai 2024

Danke Dir, habe ich mir angeguckt und feststellen müssen, dass ich das schon habe (Zeile 10):

Code

root@vdrserver:/etc/vdr/conf.d# vdr --showargs
--record=/usr/lib/vdr/vdr-recordingaction
--user=vdr
--grab=/tmp
--port=6419
--watchdog=0
--shutdown=/usr/lib/vdr/vdr-shutdown.wrapper
--dirnames=,,1
--log=3
--vfat
--instance=0
--video=/srv/vdr/video
--plugin=conflictcheckonly
--plugin=dbus2vdr --shutdown-hooks=/usr/share/vdr/shutdown-hooks --shutdown-hooks-wrapper=/usr/share/vdr-plugin-dbus2vdr/shutdown-wrapper
--plugin=devstatus
--plugin=epgsearch
--plugin=epgsearchonly
--plugin=epgsync
--plugin=femon
--plugin=live --port=8008 --ip=0.0.0.0
--plugin=markad --astopoffs=0
--plugin=quickepgsearch
--plugin=streamdev-server
--plugin=svdrpservice
--plugin=tvscraper

Alles anzeigen

Das Verhalten mit Doppelpunkten tritt also trotz --vfat auf.

seahawk1986 · 19. Mai 2024

--dirnames=,,1 schaltet schon das Encoding von Sonderzeichen an - mit --vfat gibt es zusätzlich noch eine Längenbeschränkung für Datei- und Ordnernamen (das entspräche --dirnames=250,40,1, was man nicht unbedingt haben will).

Aber irgendwie komme ich da noch nicht ganz mit - über NFS sind Sonderzeichen wie Doppelpunkte normalerweise kein Problem, die Beschränkung hat eigentlich nur Windows (und Samba ohne Unix-Extensions).

Zitat von cduerr

Natürlich schaut der Dateiname korrekt aus, er wird mit #3A umschrieben.

Die vom VDR erstellten Dateien enthalten eigentlich keine Sonderzeichen, nur die Ordnernamen - aber wenn der Doppelpunkt durch seinen Hex-Wert #3A ersetzt wird, scheint das Encoding von Seite des VDR aus zu funktionieren.

cduerr · 19. Mai 2024

ich habe bisher nur die Serverseite betrachtet. Es gibt zwar Samba- und NFS-Freigabe, aber die Dateinamen tauchen schon auf dem Server auf (SSH).

Code

root@vdrserver:~# locale
LANG=en_US.UTF-8
LANGUAGE=
LC_CTYPE="en_US.UTF-8"
LC_NUMERIC="en_US.UTF-8"
LC_TIME="en_US.UTF-8"
LC_COLLATE="en_US.UTF-8"
LC_MONETARY="en_US.UTF-8"
LC_MESSAGES="en_US.UTF-8"
LC_PAPER="en_US.UTF-8"
LC_NAME="en_US.UTF-8"
LC_ADDRESS="en_US.UTF-8"
LC_TELEPHONE="en_US.UTF-8"
LC_MEASUREMENT="en_US.UTF-8"
LC_IDENTIFICATION="en_US.UTF-8"
LC_ALL=

Alles anzeigen

seahawk1986 · 20. Mai 2024

Das sollte dann zu einem Pfad wie /srv/vdr/video/Pirates_of_the_Caribbean#3A_Salazars_Rache/2021-02-01.01.00.9-0.rec für eine Aufnahme führen - mir ist noch nicht ganz klar, wieso das zu Problemen beim Schneiden führt.

cduerr · 20. Mai 2024

Normalerweise kann man ja mit der Fernbedienung Taste 2 auch ein lokales Schneiden auf dem Client starten. Das bedeutet, dass es wahnsinnig lange dauert - die Videodaten müssen ja mindestens zweimal übertragen werden. Beim Druck auf die Taste 2 wird bei mir seit kurzem nur die Lautstärke reduziert. Vielleicht hat das mit der alternden Fernbedienung zu tun, aber ich hatte ja darüber berichtet, eigentlich war dann alles wieder gut.

Anyway, ich würde ohnehin das Schneiden auf dem Server bevorzugen. Erstens, weil das schneller ist, weil er nicht übers Netzwerk transferieren muss. Zweitens, weil das unempfindlicher gegenüber Abstürzen ist. Drittens, weil das in einer Queue auf dem Server landet, der sich darum besser kümmern kann und ich derweil auch andere Sachen machen kann.

Hier ist das Skript aus dem Forum. Ich glaube, der kümmert sich nicht um die Normalisierung solcher Sonderzeichen in UTF8, wie man das bräuchte - sonst ist es super. Als Workaround benenne ich kritische Dateien um, mache ein "touch .update" im /srv/vdr/video" und probiere es erneut. Frei nach dem Motto "Computer lösen Probleme, die man ohne sie gar nicht erst hätte!" - wäre es doch schön, wenn das Skript das automagisch miterledigen könnte. $RECNAME müsste es sein, wenn ich mich nicht irre.

Code

#auf dem Client gibt es einen custom reccmds hook:
#/etc/vdr/command-hooks/reccmds.custom.conf:
#Schneiden               : /usr/local/bin/schneidelokal

#liegt in /usr/local/bin/schneidelokal
#!/bin/bash

REC=$1

SVDRPCMDREMOTE="/usr/bin/svdrpsend -d vdrserver"
SVDRPCMDLOCAL="/usr//bin/svdrpsend"
RECDIR="/srv/vdr/video/Recordings_on_vdrserver\(nfs\)"
RECDATE=`basename "$REC" | cut -b 3-10 | awk -F- '{ print $3"."$2"."$1 }'`
echo $RECDATE
RECTIME=`basename "$REC" | cut -b 12-16 | awk -F. '{print $1":"$2 }'`
echo $RECTIME
RECNAME=`dirname "$REC" | sed -e 's/^\/srv\/vdr\/video\/Recordings_on_vdrserver(nfs)\///;s/_/ /g;s/\//~/g'`
#echo $RECNAME
#RECNAME2=`dirname "$REC" | sed -e 's/^\/srv\/vdr\/video\/Recordings_on_vdrserver(nfs)\///;s/_/ /g'`
#echo $RECNAME2

SVDRPSTRING=`$SVDRPCMDREMOTE LSTR | awk '/^250/&&/'"$RECDATE"'/&&/'"$RECTIME"'/&&/'"$RECNAME"'/'`
LSTRCOUNT=`$SVDRPCMDREMOTE LSTR | awk '/^250/&&/'"$RECDATE"'/&&/'"$RECTIME"'/&&/'"$RECNAME"'/' |wc -l`
echo $SVDRPSTRING
echo $LSTRCOUNT

if [ "$LSTRCOUNT" != "1" ]; then
    echo "Aufnahme nicht eindeutig bestimmbar - Abbruch"
    exit 1
fi

RECID=`echo $SVDRPSTRING | cut -b 5- | awk '{ print $1 }'`

$SVDRPCMDREMOTE EDIT $RECID
echo "Schnitt von ($RECID) $RECNAME vom $RECDATE | $RECTIME gestartet"

exit 0

Alles anzeigen

seahawk1986 · 20. Mai 2024

Dann scheitert es daran, dass kein Unescaping im Skript stattfindet und du den von svdrpsend lstr zurückgegeben Namen mit dem Pfad vergleichst - man könnte da drum herum arbeiten, indem man den VDR um den Pfad der Aufnahmen der Kandidaten bittet (svdrpsend lstr $REC_ID path) und die Ordnerstruktur rückwärts vergleicht - grob könnte das so aussehen:

Python: local_cut.py

#!/usr/bin/python3
import re
import sys
from pathlib import Path
import subprocess


VIDEODIR = Path("/srv/vdr/video/")
HOST_RE = re.compile(f"Recordings_on_(?P<hostname>\w+)\(.+\).*")
DATETIME_RE = re.compile(r"(?P<date>\d{4}-\d{2}-\d{2})\.(?P<time>\d{2}\.\d{2})\.\d+-\d+.rec")


def remote_svdrp_lstr(hostname: str, rec_id: None|str = None):
    cmd = ['svdrpsend', '-d', hostname, 'lstr', ]
    if rec_id:
        cmd.extend([rec_id, "path"])
    r = subprocess.run( cmd, check=True, universal_newlines=True, stdout=subprocess.PIPE)
    for line in r.stdout.splitlines():
        if not line.startswith("250"):
            continue
        yield line


def is_match(relative_path: Path, path_to_check: str):
    for local, remote in zip(reversed(relative_path.parts[1:]), reversed(Path(path_to_check).parts)):
        if local != remote:
            return False
    return True


def remote_svdrp_edit(hostname: str, rec_id: str):
    r = subprocess.run(['svdrpsend', '-d', hostname, 'EDIT', rec_id], check=True, universal_newlines=True)
    return r.stdout


local_path = Path(sys.argv[1])

relative_path = local_path.relative_to(VIDEODIR)

if m := HOST_RE.match(str(relative_path)):
    hostname = m.group('hostname')
else:
    raise ValueError("unexpected naming schema")

if m := DATETIME_RE.match(local_path.name):
    local_rec_date, local_rec_time = m.group('date', 'time')
    local_rec_time = local_rec_time.replace('.', ':')
    local_rec_date = ".".join(reversed(local_rec_date[2:].split('-')))
else:
    raise ValueError("unexpected naming schema for time and date in path")

matches = []
for line in remote_svdrp_lstr(hostname):
    if c := line.partition('-')[-1]:
         rec_id, r_date, r_time, r_duration, r_name = c.split(maxsplit=4)
         if r_date == local_rec_date and r_time == local_rec_time:
             for l in remote_svdrp_lstr(hostname, rec_id):
                 if remote_path := l.partition(' ')[-1]:
                     if is_match(relative_path, remote_path):
                         print(f"matching recording for: {relative_path}: {hostname}:{remote_path}")
                         matches.append(rec_id)

if len(matches) == 1:
    r = remote_svdrp_edit(hostname, matches[0])
    print(f"Schnitt von ({matches[0]}) {relative_path} auf {hostname} gestartet")
elif len(matches) == 0:
    sys.exit(f"Keine passende Aufnahme auf {hostname} gefunden")
else:
    sys.exit("Aufnahme nicht eindeutig bestimmbar - Abbruch")

Alles anzeigen

Doppelpunkte in Dateinamen

Jetzt mitmachen!

Teilen