[markad] überarbeiteter Decoder

kfb77 · 12. Januar 2020

da muss was beim Erzeugen der Files schief gelaufen sein, nur in Makefile steht was passenden drin. Aber egal, das reicht. Das Makefile ist definitiv nicht richtig, da stimmt was beim Anwenden der Patches nicht. Poste mal bitte Befehl und Ausgabe beim Anwenden der 4 Patches. In Putty gibt es dafür eine Log Funktion (Session -> Logging), dann hast du alles gleich in einem File.

Asta · 12. Januar 2020

OK, es geht. Ich habe nochmal komplett von vorne angefangen. Gefühlt hatte ich das schon ein paar mal. Ich glaube das ich Tatsache ein Problem mit dem Makefile patch hatte. Getestet habe ich Markad jetzt noch nicht, aber er hat kompiliert und "/usr/bin/markad" erstellt. Ich hänge trotzdem mal das log an. Vielleicht hilft es dem nächsten der ein Problem hat. Vielen Dank für deine Geduld.

Edit:

Ein erster Test mit ein paar Aufnahmen hat perfekte Marken gesetzt.

kfb77 · 12. Januar 2020

Asta

bezüglich markad sieht es jetzt gut aus. Aber darüber würde ich mir Sorgen machen, wenn das mein VDR wäre

Code

Jan 12 19:30:27 raspberrypi vdr: [20766] --- begin invalid lock sequence report
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  W  -  -  -  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  *  -  -  W  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  *  -  -  U  -  -  -  -  -  U
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  U  -  -  -  -  -  -  -  -  U
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  W  -  -  -  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  *  -  -  W  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  *  -  -  U  -  -  -  -  -  U
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  U  -  -  -  -  -  -  -  -  U
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  W  -  -  -  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20774  -  U  -  -  -  -  -  -  -  -  U
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  -  R  -  -  -  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  -  *  -  -  -  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  -  *  -  -  -  -  -  -  -  -  U
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  -  *  -  -  R  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  -  *  -  -  *  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  -  *  -  -  *  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  -  *  -  -  *  -  -  -  -  -  U
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  -  *  -  -  *  -  -  -  -  -  U
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  -  *  -  -  U  -  -  -  -  -  U
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766  R  *  -  -  -  -  -  -  -  -  L
Jan 12 19:30:28 raspberrypi vdr: [20766] 20766 invalid lock sequence: 1 Timers
Jan 12 19:30:28 raspberrypi vdr: [20766] full backtrace:
Jan 12 19:30:28 raspberrypi vdr: [20766] /usr/local/bin/vdr cStateLock::Lock(cStateKey&, bool, int) at thread.c:734
Jan 12 19:30:28 raspberrypi vdr: [20766] /usr/local/bin/vdr cTimers::GetTimersRead(cStateKey&, int) at timers.c:822
Jan 12 19:30:28 raspberrypi vdr: [20766] /usr/local/lib/vdr/libvdr-skindesigner.so.2.3.8 cGlobalTimers::SetLocalTimers() at timers.h:221 at cGlobalTimers::SetLocalTimers() at globaltimers.c:82
Jan 12 19:30:28 raspberrypi vdr: [20766] /usr/local/lib/vdr/libvdr-skindesigner.so.2.3.8 cGlobalTimers::LoadTimers() at globaltimers.c:36
Jan 12 19:30:28 raspberrypi vdr: [20766] /usr/local/lib/vdr/libvdr-skindesigner.so.2.3.8 cSDDisplayChannel::Flush() at displaychannel.c:99 at cSDDisplayChannel::Flush() at displaychannel.c:95
Jan 12 19:30:28 raspberrypi vdr: [20766] /usr/local/bin/vdr cDisplayChannel::cDisplayChannel(int, bool) at menu.c:4531
Jan 12 19:30:28 raspberrypi vdr: [20766] /usr/local/bin/vdr main at vdr.c:1071
Jan 12 19:30:28 raspberrypi vdr: [20766] /lib/arm-linux-gnueabihf/libc.so.6 __libc_start_main at libc-start.c:342
Jan 12 19:30:28 raspberrypi vdr: [20766] --- end invalid lock sequence report
Jan 12 19:30:28 raspberrypi vdr: [20766] --- THERE WILL BE NO FURTHER REPORTS UNTIL VDR IS RESTARTED!

Alles anzeigen

Asta · 12. Januar 2020

Ich habe heute vom VDR2.4.1 auf 2.3.8 umgestellt. Da läuft noch nicht alles rund. Diesen Eintrag hatte ich erst nach dem downgrade gesehen. Mal sehen was das ist.

kfb77 · 12. Januar 2020

Zitat von Asta

Ein erster Test mit ein paar Aufnahmen hat perfekte Marken gesetzt.

Das freut mich besonders, so muss es sein, dann hat sich mein Aufwand gelohnt.

ollo · 12. Januar 2020

Hallo kfb77,

ich habe hier folgendes Problem - die marks Datei enthält nur die Stop Marke, kein Start?! Und einen Fehler bzgl. des indes gibt es auch?!

Code

$ command/markad nice /srv/vdr/video/Die_Legende_von_Aang/2019-12-29.01.57.4-0.rec/
markad: Sun Jan 12 20:33:17 [6863] starting v0.1.6 (ea2e182) (64bit)
markad: Sun Jan 12 20:33:17 [6863] on /srv/vdr/video/Die_Legende_von_Aang/2019-12-29.01.57.4-0.rec
markad: Sun Jan 12 20:33:17 [6863] broadcast aspectratio 16:9 (from info)
markad: Sun Jan 12 20:33:17 [6863] getting broadcast start from info mtime
markad: Sun Jan 12 20:33:17 [6863] pre-timer 143s
markad: Sun Jan 12 20:33:17 [6863] broadcast length 91m
markad: Sun Jan 12 20:33:17 [6863] found H262-video (0x00ff)
markad: Sun Jan 12 20:33:17 [6863] found AC3 (0x0103)
markad: Sun Jan 12 20:33:18 [6863] using libavcodec.so.57.107.100 with 6 threads
markad: Sun Jan 12 20:33:18 [6863] using codec MPEG-2 video
markad: Sun Jan 12 20:33:18 [6863] channel SAT_1
markad: Sun Jan 12 20:33:18 [6863] parameter --loglevel is set to 2
markad: Sun Jan 12 20:33:18 [6863] SDTV 720x576i25
markad: Sun Jan 12 20:33:18 [6863] startframe 3575
markad: Sun Jan 12 20:33:18 [6863] chkSTART set to 12575
markad: Sun Jan 12 20:33:18 [6863] chkSTOP set to 155300
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
[mpeg2video @ 0x5599ef9f0260] Invalid frame dimensions 0x0.
markad: Sun Jan 12 20:33:18 [6863] detected end of black screen (0)*
markad: Sun Jan 12 20:33:19 [6863] detected start of black screen (3540)
markad: Sun Jan 12 20:33:19 [6863] detected end of black screen (3576)*
markad: Sun Jan 12 20:33:20 [6863] detected start of black screen (3948)
markad: Sun Jan 12 20:33:20 [6863] detected end of black screen (3972)*
markad: Sun Jan 12 20:33:20 [6863] detected start of black screen (4188)
markad: Sun Jan 12 20:33:20 [6863] detected end of black screen (4236)*
markad: Sun Jan 12 20:33:20 [6863] detected start of black screen (4440)
markad: Sun Jan 12 20:33:20 [6863] detected end of black screen (4632)*
markad: Sun Jan 12 20:33:20 [6863] detected start of black screen (4788)
markad: Sun Jan 12 20:33:20 [6863] detected end of black screen (4860)*
markad: Sun Jan 12 20:33:20 [6863] detected start of horiz. borders (3540)*
markad: Sun Jan 12 20:33:20 [6863] detected start of black screen (5316)
markad: Sun Jan 12 20:33:20 [6863] detected end of black screen (5484)*
markad: Sun Jan 12 20:33:20 [6863] detected start of black screen (5928)
markad: Sun Jan 12 20:33:20 [6863] detected end of black screen (6504)*
markad: Sun Jan 12 20:33:24 [6863] DolbyDigital5.1 audio detected. logo/border/aspect detection disabled
markad: Sun Jan 12 20:33:24 [6863] assuming start (3540)
markad: Sun Jan 12 20:33:24 [6863] aspectratio of 16:9 detected
markad: Sun Jan 12 20:33:24 [6863] startframe 3540
markad: Sun Jan 12 20:33:24 [6863] chkSTART set to 12540
markad: Sun Jan 12 20:33:24 [6863] chkSTOP set to 155265
markad: Sun Jan 12 20:33:24 [6863] using mark on position 3540 as start mark
markad: Sun Jan 12 20:33:24 [6863] horizontal borders, logo detection disabled
markad: Sun Jan 12 20:33:43 [6863] sequence error 3->8 (0x00ff)
markad: Sun Jan 12 20:34:03 [6863] assuming stop (145015)
markad: Sun Jan 12 20:34:03 [6863] cleanup marks
markad: Sun Jan 12 20:34:03 [6863] index doesn't match marks, sorry you're lost
markad: Sun Jan 12 20:34:03 [6863] skipped 435 bytes
markad: Sun Jan 12 20:34:03 [6863] processed time 45.49s, 146953/0 frames, 3230.6 fps, 129.2 pps

$ cat /srv/vdr/video/Die_Legende_von_Aang/2019-12-29.01.57.4-0.rec/marks 
1:36:40.16 assuming stop (145015)

Alles anzeigen

Danke!

kfb77 · 12. Januar 2020

Hallo ollo

du nutzt nicht den neuen Decoder und das loglevel ist zu niedrig um was zu erkennen. Laut dem deinem Log müsste eine Start Marke bei 3540, aber möglichweise wurde die wieder verworfen.

Bitte nochmals das Logfile posten mit dem Aufruf:

markad --loglevel=3 --astopoffs=0 --cDecoder --log2rec nice <Pfad zum Recording>

ollo · 12. Januar 2020

Hallo kfb77,

Danke, habe ich gemacht. Jetzt gibt es zwar eine Start und eine Stop marke, beide sind aber falsch. Log habe ich angehängt.

kfb77 · 12. Januar 2020

Hallo ollo

laut dem LogFile müsste der Film mit Frame 3552 starten (ca. 2:22) und mit dem 140040 enden (ca. 1h 33:21), jeweils erkannt durch den horizontalen Balken. Und dazwischen war der Balken dauerhaft vorhanden, also keine Unterbrechung. Das kann bei dem Sender nicht sein …

Wie sieht es den wirklich aus ? War da eine Werbung mit Balken ab 2:22 ?

Es gibt Fälle, wo ich keine Change habe, was vernünftiges zu erkennen, vielleicht ist das so einer.

kfb77 · 12. Januar 2020

ollo

Ich habe was übersehen "DolbyDigital5.1 audio detected. logo/border/aspect detection disabled". Und da sind sich beide Decoder einig.

Kein Wunder findet er in der Aufnahme keine Änderung der horizontalen Balken, weil er nur nach Änderungen der Audio Kanäle sucht (und keine findet).

Das ist entweder ein Bug, oder SAT.1 sendet Werbung jetzt auch mit 6 Kanal Ton. Ich mache mal selbst eine Aufnahme und schaue mir das an.

iNOB · 13. Januar 2020

Erst einmal danke an kfb77, dass er sich diesem Problem widmet!

Im Großen und Ganzen funktioniert das schon recht gut. Lediglich mit RTLHD (Einstellung #D0) habe ich nach wie vor Probleme. Seit der letzten Änderung werden zumindest ansatzweise Beginn und Ende einer Sendung (z.B. Bachelor, Dr. Bob's Australien) getroffen. Dazwischen geschaltete Werbung wird nicht erkannt. Vor der Änderung sind überhaupt keine Marken gesetzt worden. Von daher ein Fortschritt.

Beim Dschungelcamp (Logo: RTL HD | Live) erkennt er Anfang und Ende, als auch alle Werbeblöcke Allerdings sind die gesetzten Marken relativ ungenau. Anders als z.B. bei ProSiebenHD (BigBangTheorie, The Young Sheldon), wo die Schnittmarken perfekt sitzen.

Falls irgendwelche Schnipsel der Sendungen gebraucht werden, kann ich da gerne weiterhelfen...

kfb77 · 13. Januar 2020

iNOB

ich schaue mir das mal an, bitte poste "info" und "markad.log" aus dem Aufnahmeverzeichnis nach dem Aufruf:

markad --loglevel=3 --astopoffs=0 --cDecoder --log2rec nice <Pfad zum Recording>

iNOB · 13. Januar 2020

Falls du noch etwas brauchst, sag Bescheid

kfb77 · 13. Januar 2020

iNOB

da werden (fast) keine Logos erkannt, nur bei IBES sind welche, aber auch viel zu wenig. Prüfe mal bitte, ob der Inhalt vom Logo File noch mit dem aktuellen Logo übereinstimmt, ggf. mal neu bauen.

Bitte schaue mal in ein Log von einem Sender der funktioniert (ProSiebenHD) ob die Framerate gleich ist, ich habe da bei den FTA HD Sendern was anders in Erinnerung.

Code

Mon Jan 13 08:36:16 [977] average frame rate 25 frames per second
Mon Jan 13 08:36:16 [977] real frame rate    25 frames per second

Um weiter zu kommen, brauche ich ein Stück der Aufnahme. Teile mir bitte per PN die Zugangsdaten mit. Am liebsten "Der Bachelor", den nehme ich sowieso am Mittwoch auf, weil der wohl auch in SD Probleme macht.

iNOB · 13. Januar 2020

Bei IBES wird das "RTL HD | Live" Logo eingeblendet. Komischerweise findet er da zumindest ansatzweise die Werbeblöcke. Hinterlegt ist aber eigentlich nur das "RTL HD" Logo.

Die Framerate ist auf ProSiebenHD genauso wie bei RTLHD, ...siehe Anhang.

kfb77 · 13. Januar 2020

iNOB

nein, die ist nicht gleich, so hatte ich das auch von ANIXE HD in Erinnerung. Seltsam ...

Code

Mon Jan 13 11:34:51 [793] average frame rate 25 frames per second
Mon Jan 13 11:34:51 [793] real frame rate    50 frames per second

Manchmal wird in libavcodec die real frame rate verdoppelt bei interlaced Video, manchmal nicht. Um da was zu finden brauche ich ein Stück der Aufnahme.

hondansx · 13. Januar 2020

Ich habe nun auf die letzte 4.2.2 aktualisiert. Bekomme mit dem neuen Decoder noch einen Segfault:

Code

Program received signal SIGSEGV, Segmentation fault.
0x0000555555561367 in cMarkAdStandalone::CheckLogoMarks (this=0x555555596c40) at markad-standalone.cpp:675
675             if (((mark->type & 0x0F)==MT_START) && (mark->Next()) && ((mark->Next()->type & 0x0F)==MT_START)) {  // two start marks, delete second

#0  0x0000555555561367 in cMarkAdStandalone::CheckLogoMarks (this=0x555555596c40) at markad-standalone.cpp:675
        mark = 0x90
#1  0x00005555555658e6 in cMarkAdStandalone::ProcessFile (this=0x555555596c40) at markad-standalone.cpp:1794
No locals.
#2  0x0000555555565a2b in cMarkAdStandalone::Process (this=0x555555596c40) at markad-standalone.cpp:1811
No locals.
#3  0x000055555556aa39 in main (argc=6, argv=0x7fffffffde58) at markad-standalone.cpp:3748
        MaxPossibleFileDescriptors = 1024
        statbuf = {st_dev = 45, st_ino = 35681, st_nlink = 1, st_mode = 16877, st_uid = 0, st_gid = 0, __pad0 = 0, st_rdev = 0,
          st_size = 108, st_blksize = 4096, st_blocks = 0, st_atim = {tv_sec = 1578510780, tv_nsec = 253638350}, st_mtim = {
            tv_sec = 1578912697, tv_nsec = 178019438}, st_ctim = {tv_sec = 1578912697, tv_nsec = 178019438}, __glibc_reserved = {0,
            0, 0}}
        c = -1
        bAfter = false
        bEdited = false
        bFork = false
        bNice = true
        bImmediateCall = false
        niceLevel = 19
        ioprio_class = 3
        ioprio = 7
        tok = 0x0
        str = 0x0
        ntok = 32767
        online = 0
        bPass2Only = false
        bPass1Only = false
        config = {logoDirectory = "/var/lib/markad", '\000' <repeats 1008 times>, LogoDir = '\000' <repeats 1023 times>,
          markFileName = '\000' <repeats 1023 times>, svdrphost = "127.0.0.1", '\000' <repeats 1014 times>, logoExtraction = -1,
          logoWidth = -1, logoHeight = -1, ignoreInfo = 0, svdrpport = 2001, threads = -1, astopoffs = 0, posttimer = 600,
          use_cDecoder = true, recDir = 0x555555597b20 "/video/@video/video0/Der_Bachelor/Folge_1/2020-01-08.20.13.2-0.rec",
          DecodeVideo = true, DecodeAudio = true, BackupMarks = false, NoPid = false, OSD = false, Before = false, GenIndex = false,

Alles anzeigen

kfb77 · 13. Januar 2020

hondansx

ich glaube am Backtrace zu erkennen, wo der Fehler ist. Teste mal bitte den angehängt Fix und poste ob der Crash damit weg ist. Falls es funktioniert, nehme ich es in die nächste Version auf.

Bitte im Unterverzeichnis markad/command den Patch im Anhang anwenden ( patch < markad-crash-fix.diff)

kfb77 · 13. Januar 2020

iNOB

Die Schnittmarken bei deinem ProSieben Beispiel sind so gut, weil nicht nach Logo Erkennung, sondern nach Audio Kanalwechsel geschnitten werden konnte, das geht immer viel zuverlässiger.

Die Schnittmarken bei RTL sind so schlecht, weil das Logo nicht aktuell ist.

Damit geht es bei mir mit deinem "Der Bachelor" Schnipsel: Link Da steht C0 drin, falls wirklich D0 benötigt wird, muss das angepasst werden. In deinem Beispiel war kein 6 Kanal Ton drin, weder am Anfang, noch in der Sendung.

Der Schnipsel war zu klein um die letztendliche Entscheidung, was die Start Marke wird, zu sehen. Aber ich gehe mal davon aus, dass es auf Frame 3221 (2:08) raus laufen wird. Das ist zwar 2 Sekunden zu spät, aber das liegt an dem hellen Himmel Hintergrund in den ersten beiden Sekunden. Bei zu hellem Hintergrund kann das Logo nicht erkannt werden.

Teste mal bitte nochmal "Der Bachelor" und poste das "markad.log" und "marks" mit deiner Bewertung, wo es passt und wo nicht.

kfb77 · 13. Januar 2020

ollo

Zitat von kfb77

Das ist entweder ein Bug, oder SAT.1 sendet Werbung jetzt auch mit 6 Kanal Ton. Ich mache mal selbst eine Aufnahme und schaue mir das an.

Weder noch, ich habe inzwischen mit einer eigenen Aufnahme getestet und kann das Problem nicht reproduzieren. Der Wechsel zwischen 2 Kanal Ton und 6 Kanal Ton ist da und wird auch richtig erkannt. Hast du mal mit anderen Aufnahmen getestet, ist das Problem bei allen Aufnahmen ?

[markad] überarbeiteter Decoder

Jetzt mitmachen!

Teilen

Benutzer online in diesem Thema