Doppelpunkte in Dateinamen

cduerr · May 18, 2024 at 5:54 PM

Hallo,

immer wieder werden durch das Schema F Doppelpunkte im Aufnahmenamen verwendet, die dann dafür sorgen, dass ich die Datei über die NFS-Freigabe nicht vernünftig schneiden kann.

Beispiel:

MacGyver: Jagd nach dem Schatz von Atlantis~2024.05.18-18:20-Sat

(da sind sogar zwei drin; kommt von epgsearch eine geplante Serienaufnahme, obwohl es einer der beiden Filme ist, aber egal, ist ja nur ein Beispiel).

Natürlich schaut der Dateiname korrekt aus, er wird mit #3A umschrieben.

Gibt es eine Möglichkeit, wie man das generell unterbindet oder was muss ich genau tun, damit ich korrekt schneiden kann (mit Skript)?

Mein Skript (aus dem Forum, bereits leicht angepasst) könnte ich anhängen, wenn gewünscht. Mir wäre es eigentlich lieber, wenn solche kritischen Zeichen gar nicht erst ins Dateisystem kämen (weil man den Terz mit anderen System bekommt).

jrie · May 18, 2024 at 6:04 PM

vdr --vfat

cduerr · May 19, 2024 at 8:08 AM

Danke Dir, habe ich mir angeguckt und feststellen müssen, dass ich das schon habe (Zeile 10):

Code

root@vdrserver:/etc/vdr/conf.d# vdr --showargs
--record=/usr/lib/vdr/vdr-recordingaction
--user=vdr
--grab=/tmp
--port=6419
--watchdog=0
--shutdown=/usr/lib/vdr/vdr-shutdown.wrapper
--dirnames=,,1
--log=3
--vfat
--instance=0
--video=/srv/vdr/video
--plugin=conflictcheckonly
--plugin=dbus2vdr --shutdown-hooks=/usr/share/vdr/shutdown-hooks --shutdown-hooks-wrapper=/usr/share/vdr-plugin-dbus2vdr/shutdown-wrapper
--plugin=devstatus
--plugin=epgsearch
--plugin=epgsearchonly
--plugin=epgsync
--plugin=femon
--plugin=live --port=8008 --ip=0.0.0.0
--plugin=markad --astopoffs=0
--plugin=quickepgsearch
--plugin=streamdev-server
--plugin=svdrpservice
--plugin=tvscraper

Display More

Das Verhalten mit Doppelpunkten tritt also trotz --vfat auf.

seahawk1986 · May 19, 2024 at 10:23 AM

--dirnames=,,1 schaltet schon das Encoding von Sonderzeichen an - mit --vfat gibt es zusätzlich noch eine Längenbeschränkung für Datei- und Ordnernamen (das entspräche --dirnames=250,40,1, was man nicht unbedingt haben will).

Aber irgendwie komme ich da noch nicht ganz mit - über NFS sind Sonderzeichen wie Doppelpunkte normalerweise kein Problem, die Beschränkung hat eigentlich nur Windows (und Samba ohne Unix-Extensions).

Quote from cduerr

Natürlich schaut der Dateiname korrekt aus, er wird mit #3A umschrieben.

Die vom VDR erstellten Dateien enthalten eigentlich keine Sonderzeichen, nur die Ordnernamen - aber wenn der Doppelpunkt durch seinen Hex-Wert #3A ersetzt wird, scheint das Encoding von Seite des VDR aus zu funktionieren.

cduerr · May 19, 2024 at 10:56 PM

ich habe bisher nur die Serverseite betrachtet. Es gibt zwar Samba- und NFS-Freigabe, aber die Dateinamen tauchen schon auf dem Server auf (SSH).

Code

root@vdrserver:~# locale
LANG=en_US.UTF-8
LANGUAGE=
LC_CTYPE="en_US.UTF-8"
LC_NUMERIC="en_US.UTF-8"
LC_TIME="en_US.UTF-8"
LC_COLLATE="en_US.UTF-8"
LC_MONETARY="en_US.UTF-8"
LC_MESSAGES="en_US.UTF-8"
LC_PAPER="en_US.UTF-8"
LC_NAME="en_US.UTF-8"
LC_ADDRESS="en_US.UTF-8"
LC_TELEPHONE="en_US.UTF-8"
LC_MEASUREMENT="en_US.UTF-8"
LC_IDENTIFICATION="en_US.UTF-8"
LC_ALL=

Display More

seahawk1986 · May 20, 2024 at 8:23 AM

Das sollte dann zu einem Pfad wie /srv/vdr/video/Pirates_of_the_Caribbean#3A_Salazars_Rache/2021-02-01.01.00.9-0.rec für eine Aufnahme führen - mir ist noch nicht ganz klar, wieso das zu Problemen beim Schneiden führt.

cduerr · May 20, 2024 at 9:05 AM

Normalerweise kann man ja mit der Fernbedienung Taste 2 auch ein lokales Schneiden auf dem Client starten. Das bedeutet, dass es wahnsinnig lange dauert - die Videodaten müssen ja mindestens zweimal übertragen werden. Beim Druck auf die Taste 2 wird bei mir seit kurzem nur die Lautstärke reduziert. Vielleicht hat das mit der alternden Fernbedienung zu tun, aber ich hatte ja darüber berichtet, eigentlich war dann alles wieder gut.

Anyway, ich würde ohnehin das Schneiden auf dem Server bevorzugen. Erstens, weil das schneller ist, weil er nicht übers Netzwerk transferieren muss. Zweitens, weil das unempfindlicher gegenüber Abstürzen ist. Drittens, weil das in einer Queue auf dem Server landet, der sich darum besser kümmern kann und ich derweil auch andere Sachen machen kann.

Hier ist das Skript aus dem Forum. Ich glaube, der kümmert sich nicht um die Normalisierung solcher Sonderzeichen in UTF8, wie man das bräuchte - sonst ist es super. Als Workaround benenne ich kritische Dateien um, mache ein "touch .update" im /srv/vdr/video" und probiere es erneut. Frei nach dem Motto "Computer lösen Probleme, die man ohne sie gar nicht erst hätte!" - wäre es doch schön, wenn das Skript das automagisch miterledigen könnte. $RECNAME müsste es sein, wenn ich mich nicht irre.

Code

#auf dem Client gibt es einen custom reccmds hook:
#/etc/vdr/command-hooks/reccmds.custom.conf:
#Schneiden               : /usr/local/bin/schneidelokal

#liegt in /usr/local/bin/schneidelokal
#!/bin/bash

REC=$1

SVDRPCMDREMOTE="/usr/bin/svdrpsend -d vdrserver"
SVDRPCMDLOCAL="/usr//bin/svdrpsend"
RECDIR="/srv/vdr/video/Recordings_on_vdrserver\(nfs\)"
RECDATE=`basename "$REC" | cut -b 3-10 | awk -F- '{ print $3"."$2"."$1 }'`
echo $RECDATE
RECTIME=`basename "$REC" | cut -b 12-16 | awk -F. '{print $1":"$2 }'`
echo $RECTIME
RECNAME=`dirname "$REC" | sed -e 's/^\/srv\/vdr\/video\/Recordings_on_vdrserver(nfs)\///;s/_/ /g;s/\//~/g'`
#echo $RECNAME
#RECNAME2=`dirname "$REC" | sed -e 's/^\/srv\/vdr\/video\/Recordings_on_vdrserver(nfs)\///;s/_/ /g'`
#echo $RECNAME2

SVDRPSTRING=`$SVDRPCMDREMOTE LSTR | awk '/^250/&&/'"$RECDATE"'/&&/'"$RECTIME"'/&&/'"$RECNAME"'/'`
LSTRCOUNT=`$SVDRPCMDREMOTE LSTR | awk '/^250/&&/'"$RECDATE"'/&&/'"$RECTIME"'/&&/'"$RECNAME"'/' |wc -l`
echo $SVDRPSTRING
echo $LSTRCOUNT

if [ "$LSTRCOUNT" != "1" ]; then
    echo "Aufnahme nicht eindeutig bestimmbar - Abbruch"
    exit 1
fi

RECID=`echo $SVDRPSTRING | cut -b 5- | awk '{ print $1 }'`

$SVDRPCMDREMOTE EDIT $RECID
echo "Schnitt von ($RECID) $RECNAME vom $RECDATE | $RECTIME gestartet"

exit 0

Display More

seahawk1986 · May 20, 2024 at 1:11 PM

Dann scheitert es daran, dass kein Unescaping im Skript stattfindet und du den von svdrpsend lstr zurückgegeben Namen mit dem Pfad vergleichst - man könnte da drum herum arbeiten, indem man den VDR um den Pfad der Aufnahmen der Kandidaten bittet (svdrpsend lstr $REC_ID path) und die Ordnerstruktur rückwärts vergleicht - grob könnte das so aussehen:

Python: local_cut.py

#!/usr/bin/python3
import re
import sys
from pathlib import Path
import subprocess


VIDEODIR = Path("/srv/vdr/video/")
HOST_RE = re.compile(f"Recordings_on_(?P<hostname>\w+)\(.+\).*")
DATETIME_RE = re.compile(r"(?P<date>\d{4}-\d{2}-\d{2})\.(?P<time>\d{2}\.\d{2})\.\d+-\d+.rec")


def remote_svdrp_lstr(hostname: str, rec_id: None|str = None):
    cmd = ['svdrpsend', '-d', hostname, 'lstr', ]
    if rec_id:
        cmd.extend([rec_id, "path"])
    r = subprocess.run( cmd, check=True, universal_newlines=True, stdout=subprocess.PIPE)
    for line in r.stdout.splitlines():
        if not line.startswith("250"):
            continue
        yield line


def is_match(relative_path: Path, path_to_check: str):
    for local, remote in zip(reversed(relative_path.parts[1:]), reversed(Path(path_to_check).parts)):
        if local != remote:
            return False
    return True


def remote_svdrp_edit(hostname: str, rec_id: str):
    r = subprocess.run(['svdrpsend', '-d', hostname, 'EDIT', rec_id], check=True, universal_newlines=True)
    return r.stdout


local_path = Path(sys.argv[1])

relative_path = local_path.relative_to(VIDEODIR)

if m := HOST_RE.match(str(relative_path)):
    hostname = m.group('hostname')
else:
    raise ValueError("unexpected naming schema")

if m := DATETIME_RE.match(local_path.name):
    local_rec_date, local_rec_time = m.group('date', 'time')
    local_rec_time = local_rec_time.replace('.', ':')
    local_rec_date = ".".join(reversed(local_rec_date[2:].split('-')))
else:
    raise ValueError("unexpected naming schema for time and date in path")

matches = []
for line in remote_svdrp_lstr(hostname):
    if c := line.partition('-')[-1]:
         rec_id, r_date, r_time, r_duration, r_name = c.split(maxsplit=4)
         if r_date == local_rec_date and r_time == local_rec_time:
             for l in remote_svdrp_lstr(hostname, rec_id):
                 if remote_path := l.partition(' ')[-1]:
                     if is_match(relative_path, remote_path):
                         print(f"matching recording for: {relative_path}: {hostname}:{remote_path}")
                         matches.append(rec_id)

if len(matches) == 1:
    r = remote_svdrp_edit(hostname, matches[0])
    print(f"Schnitt von ({matches[0]}) {relative_path} auf {hostname} gestartet")
elif len(matches) == 0:
    sys.exit(f"Keine passende Aufnahme auf {hostname} gefunden")
else:
    sys.exit("Aufnahme nicht eindeutig bestimmbar - Abbruch")

Display More

Participate now!