Kommt das öfter vor, das da Zeichen drin sind, die da nichts zu suchen haben?
Kommt das öfter vor, das da Zeichen drin sind, die da nichts zu suchen haben?
Ja. Je nach dem, wie viele Updates bei einem EPG Scan kommen, werden so etwa 100-10000 entfernt.
Anbei noch ein Patch, der anstelle des oben geposteten Patches verwendet werden kann. Damit wird im syslog ausgegeben, wie viele Zeichen entfernt wurden.
Ich habe mal in meiner eg.data gesucht, konnte aber keinen einzgen Fall finden, wo am Anfang oder Ende von Title oder Description ein Leerzeichen ist. Kommt das nur bei bestimmten Sendern vor?
Ist der Patch "UTF8-tauglich" oder beachtet der nur ASCII-Zeichen?
Und sollte nicht bei externem EPG das schon im EPG-Plugin gefiltert werden ?
Und sollte nicht bei externem EPG das schon im EPG-Plugin gefiltert werden ?
Wenn das von einem Plugin verursacht wird, dann sollte das auf jeden Fall dort gefixt werden.
Wenn überhaupt im VDR, dann sollte sowas in cEvent::FixEpgBugs() gemacht werden.
Ich habe mal in meiner eg.data gesucht, konnte aber keinen einzgen Fall finden, wo am Anfang oder Ende von Title oder Description ein Leerzeichen ist. Kommt das nur bei bestimmten Sendern vor?
Ich denke mal, dass VDR solche Zeichen vor dem Schreiben in die epg.data löscht.
Hier mal ein Auszug aus dem syslog, mit dem debug patch:
2025-11-02T00:00:16.528500+01:00 rpi4s vdr: [2782761] channel: BR Fernsehen Süd HD;ARD:11582:HC23M5O35P0S1:S19.2E:22000:5201=27:5202=deu@3,5203=mis@3,5207=qks@3;5206=deu@106:5204;5205=deu:0:10325:1:1025:0, num_chars_truncated = 216
2025-11-02T00:00:16.533636+01:00 rpi4s vdr: [2782761] channel: NDR FS NDS HD;ARD:11582:HC23M5O35P0S1:S19.2E:22000:5221=27:5222=deu@3,5223=mis@3,5227=qks@3;5226=deu@106:5224;5225=deu:0:10327:1:1025:0, num_chars_truncated = 156
2025-11-02T00:00:16.533838+01:00 rpi4s vdr: [2782761] channel: zdf_neo HD;ZDFvision:11361:HC23M5O35P0S1:S19.2E:22000:6310=27:6320=deu@3,6321=mis@3,6323=mul@3;6322=deu@106:6330;6331=deu:0:11130:1:1011:0, num_chars_truncated = 282
2025-11-02T00:00:16.533939+01:00 rpi4s vdr: [2782761] channel: phoenix HD;ARD:11582:HC23M5O35P0S1:S19.2E:22000:5261=27:5262=deu@3,5263=mul@3:5264:0:10331:1:1025:0, num_chars_truncated = 70
2025-11-02T00:00:16.534044+01:00 rpi4s vdr: [2782761] channel: ZDF HD;ZDFvision:11361:HC23M5O35P0S1:S19.2E:22000:6110=27:6120=deu@3,6121=mis@3,6123=mul@3;6122=deu@106:6130;6131=deu:0:11110:1:1011:0, num_chars_truncated = 144
2025-11-02T00:00:16.534131+01:00 rpi4s vdr: [2782761] channel: rbb Berlin HD;ARD:10891:HC23M5O35P0S1:S19.2E:22000:5311=27:5312=deu@3,5313=mis@3,5317=qks@3;5316=deu@106:5314;5315=deu:0:10351:1:1061:0, num_chars_truncated = 155
2025-11-02T00:00:16.534226+01:00 rpi4s vdr: [2782761] channel: ARD alpha HD;ARD:11052:HC23M5O35P0S1:S19.2E:22000:5421=27:5422=deu@3,5423=mis@3,5427=qks@3;5426=deu@106:5424;5425=deu:0:10377:1:1039:0, num_chars_truncated = 249
2025-11-02T00:00:16.534311+01:00 rpi4s vdr: [2782761] channel: SR kultur;ARD SR:11052:HC23M5O35P0S1:S19.2E:22000:0:411=deu@17:0:0:10433:1:1039:0, num_chars_truncated = 1 2025-11-02T00:00:16.534400+01:00 rpi4s vdr: [2782761] channel: SR Fernsehen HD;ARD:11052:HC23M5O35P0S1:S19.2E:22000:5431=27:5432=deu@3,5433=mis@3,5437=qks@3;5436=deu@106:5434;5435=deu:0:10378:1:1039:0, num_chars_truncated = 104
2025-11-02T00:00:16.534478+01:00 rpi4s vdr: [2782761] channel: hr-fernsehen HD;ARD:10891:HC23M5O35P0S1:S19.2E:22000:5351=27:5352=deu@3,5353=mis@3,5357=qks@3;5356=deu@106:5354;5355=deu:0:10355:1:1061:0, num_chars_truncated = 152
2025-11-02T00:00:16.534571+01:00 rpi4s vdr: [2782761] channel: ONE HD;ARD:11052:HC23M5O35P0S1:S19.2E:22000:5411=27:5412=deu@3,5413=mis@3,5417=qks@3;5416=deu@106:5414;5415=deu:0:10376:1:1039:0, num_chars_truncated = 263
2025-11-02T00:00:16.534644+01:00 rpi4s vdr: [2782761] channel: MDR Sachsen HD;ARD:10891:HC23M5O35P0S1:S19.2E:22000:5331=27:5332=deu@3,5333=mis@3,5337=qks@3;5336=deu@106:5334;5335=deu:0:10352:1:1061:0, num_chars_truncated = 140
2025-11-02T00:00:16.534728+01:00 rpi4s vdr: [2782761] channel: NDR Kultur;ARD NDR:11052:HC23M5O35P0S1:S19.2E:22000:0:0;213=deu@106:0:0:10413:1:1039:0, num_chars_truncated = 1
2025-11-02T00:00:16.535307+01:00 rpi4s vdr: [2782761] channel: radioeins;ARD rbb:10891:HC23M5O35P0S1:S19.2E:22000:0:941=deu@17:0:0:10488:1:1061:0, num_chars_truncated = 1
2025-11-02T00:00:16.535544+01:00 rpi4s vdr: [2782761] channel: RiC NEU;IP Broadcast:11302:HC23M5O35P0S1:S19.2E:22000:1930=27:1931=deu@3:0:0:4930:1:1007:0, num_chars_truncated = 2 2025-11-02T00:00:16.535735+01:00 rpi4s vdr: [2782761] channel: SWR BW HD;ARD:11493:HC23M5O35P0S1:S19.2E:22000:5121=27:5122=deu@3,5123=mis@3,5127=qks@3;5126=deu@106:5124;5125=deu:0:10303:1:1019:0, num_chars_truncated = 89
2025-11-02T00:00:16.535887+01:00 rpi4s vdr: [2782761] channel: arte HD;ARD:11493:HC23M5O35P0S1:S19.2E:22000:5111=27:5112=deu@3,5113=fra@3,5116=mul@3,5117=mis@3:5114;5115=deu,5118=fra,5119=deu,5198=dan:0:10302:1:1019:0, num_chars_truncated = 155 2025-11-02T00:00:16.536027+01:00 rpi4s vdr: [2782761] channel: Das Erste HD;ARD:11493:HC23M5O35P0S1:S19.2E:22000:5101=27:5102=deu@3,5103=mis@3,5107=qks@3;5106=deu@106:5104;5105=deu:0:10301:1:1019:0, num_chars_truncated = 128
2025-11-02T00:00:16.536178+01:00 rpi4s vdr: [2782761] channel: Channel21;BetaDigital:12148:HC34M2S0:S19.2E:27500:1023=2:1024=deu@3:0:0:769:133:7:0, num_chars_truncated = 75 2025-11-02T00:00:16.536335+01:00 rpi4s vdr: [2782761] channel: KiKA HD;ZDFvision:11347:VC23M5O35P0S1:S19.2E:22000:6610=27:6620=deu@3,6623=mul@3,6621=mis@3;6622=deu@106:6630;6631=deu:0:11160:1:1010:0, num_chars_truncated = 620
2025-11-02T00:00:16.536466+01:00 rpi4s vdr: [2782761] channel: Comedy Central HD;MTV Networks Europe:11973:VC34M2S0:S19.2E:27500:3021=27:3023=deu@4,3024=eng@4:3039:500,1830,1843,1860,186A,1842,186D,4AF4,4B64,98C,98D,9F0:28652:1:1078:0, num_chars_truncated = 12 2025-11-02T00:00:16.536594+01:00 rpi4s vdr: [2782761] channel: 3sat HD;ZDFvision:11347:VC23M5O35P0S1:S19.2E:22000:6510=27:6520=deu@3,6521=mis@3,6523=mul@3;6522=deu@106:6530;6531=deu:0:11150:1:1010:0, num_chars_truncated = 129
2025-11-02T00:00:16.536715+01:00 rpi4s vdr: [2782761] channel: Comedy Central HD AT;MTV Networks Europe:11973:VC34M2S0:S19.2E:27500:3021=27:3023=deu@4:0:500,648,650,6E2:28653:1:1078:0, num_chars_truncated = 12
2025-11-02T00:00:16.536835+01:00 rpi4s vdr: [2782761] channel: MTV;MTV Networks Europe:11973:VC34M2S0:S19.2E:27500:4081=2:4082=deu@4,4083=eng@4:4089:0:28671:1:1078:0, num_chars_truncated = 1
2025-11-02T00:00:16.536953+01:00 rpi4s vdr: [2782761] channel: Nick Jr..;MTV Networks Europe:11973:VC34M2S0:S19.2E:27500:3111=2:3112=deu@4,3113=eng@4,3114=fra@4,3122=nld@4:0:500,100,1817,1818,D95,648,D98,650,181D:28663:1:1078:0, num_chars_truncated = 58 2025-11-02T00:00:16.537076+01:00 rpi4s vdr: [2782761] channel: MTV HD AT;MTV Networks Europe:11973:VC34M2S0:S19.2E:27500:3041=27:0;3042=deu@106:0:500,648,650,6E2:28655:1:1078:0, num_chars_truncated = 1
2025-11-02T00:00:16.537214+01:00 rpi4s vdr: [2782761] channel: ZDFinfo HD;ZDFvision:11347:VC23M5O35P0S1:S19.2E:22000:6710=27:6720=deu@3,6721=mis@3,6723=mul@3;6722=deu@106:6730;6731=deu:0:11170:1:1010:0, num_chars_truncated = 163 2025-11-02T00:00:16.537330+01:00 rpi4s vdr: [2782761] channel: MTV;MTV Networks Europe:11973:VC34M2S0:S19.2E:27500:4081=2:4082=deu@4,4083=eng@4:0:0:28678:1:1078:0, num_chars_truncated = 1 2025-11-02T00:00:16.537446+01:00 rpi4s vdr: [2782761] channel: MTV 80s;MTV Networks Europe:11973:VC34M2S0:S19.2E:27500:3071=2:3072=@4:0:500,100,D96,1817,1818,1819,624,D95,648,D98,650,653:28657:1:1078:0, num_chars_truncated = 2
2025-11-02T00:00:16.537560+01:00 rpi4s vdr: [2782761] channel: MTV HD;MTV Networks Europe:11973:VC34M2S0:S19.2E:27500:3041=27:0;3042=deu@106:3046:500,1830,1843,1860,186A,1842,186D,4AF4,98C,98D,9F0,4B64:28654:1:1078:0, num_chars_truncated = 1 Also, das soll jetzt nur zeigen, dass auch deutsche öffentlich-rechtliche Sender betroffen sind. Das ist keinesfalls eine vollständige Liste.
Dass Leerzeichen / Sonderzeichen am Ende der "Description()" stehen, ist sicher (da haben wie eindeutige Belege ...). Ob solche Zeichen auch am Anfang der Texte stehen, kann ich nicht sagen.
Ist der Patch "UTF8-tauglich" oder beachtet der nur ASCII-Zeichen?
Der Patch ist UTF-8 tauglich, es werden alle UTF-8 Zeichen ignoriert.
Bevor wir noch UTF-8 Zeichen, die einen Whitespace darstellen, mit berücksichtigen, würde ich gerne ein Beispiel sehen, in dem ein Sender ein solches UTF-8 Zeichen am Anfang oder Ende eines Textes sendet.
Und sollte nicht bei externem EPG das schon im EPG-Plugin gefiltert werden ?
Doch, das sollte das EPG-Plugin machen. Solche Zeichen sind aber (auch) im Sender-EPG.
Wenn überhaupt im VDR, dann sollte sowas in cEvent::FixEpgBugs() gemacht werden.
Klar, kann man machen. Der Vorteil meiner Lösung ist, dass
Bevor wir noch UTF-8 Zeichen, die einen Whitespace darstellen, mit berücksichtigen, würde ich gerne ein Beispiel sehen
Ich würde gerne mal ein Beispiel sehen, welche Zeichen gelöscht werden. Gleich in Deiner ersten Zeile des Beispiellog steht beim BR num_chars_truncated = 216 Was wurde denn da gelöscht? Ich habe meine epg.data mal durchsucht aber auf Anhieb keinerelei Probleme gefunden. Kannst Du mal ein paar Sendungen (Sender + Zeit) aus Deiner epg.data nennen?
Ich würde gerne mal ein Beispiel sehen, welche Zeichen gelöscht werden. Gleich in Deiner ersten Zeile des Beispiellog steht beim BR num_chars_truncated = 216 Was wurde denn da gelöscht? Ich habe meine epg.data mal durchsucht aber auf Anhieb keinerelei Probleme gefunden. Kannst Du mal ein paar Sendungen (Sender + Zeit) aus Deiner epg.data nennen?
Wie schon geschrieben, ich gehe davon aus, dass VDR diese Zeichen löscht, bevor er sie in die epg.data schreibt.
Du kannst ja den Patch aus #3 nehmen und so erweitern, dass alle für Dich relevanten Informationen ausgegeben werden.
Du kannst ja den Patch aus #3 nehmen und so erweitern, dass alle für Dich relevanten Informationen ausgegeben werden.
Dafür dass ich keine Probleme habe ist mir das dann doch etwas zuviel Aufwand ....
ich gehe davon aus, dass VDR diese Zeichen löscht, bevor er sie in die epg.data schreibt.
Ich kann so eine Stelle aber nicht finden.
Das müsste wenn, dann ja wohl hier passierren:
void cEvent::Dump(FILE *f, const char *Prefix, bool InfoOnly) const
{
if (InfoOnly || startTime + duration + EPG_LINGER_TIME >= time(NULL)) {
fprintf(f, "%sE %u %jd %d %X %X\n", Prefix, eventID, intmax_t(startTime), duration, tableID, version);
if (!isempty(title))
fprintf(f, "%sT %s\n", Prefix, title);
if (!isempty(shortText))
fprintf(f, "%sS %s\n", Prefix, shortText);
if (!isempty(description)) {
strreplace(description, '\n', '|');
fprintf(f, "%sD %s\n", Prefix, description);
strreplace(description, '|', '\n');
}Ich kann so eine Stelle aber nicht finden.
Ich würde sagen, es passiert in char *compactspace(char *s)
Das ist aber dann doch die zentrale Stelle, durch die alle von EIT kommenden Strings durch müssen. Somit dürfte es in VDR selber keine Title, ShortText oder Description geben, die überflüssige Leerzeichen enthalten.
Kann es sein, dass bei dir ein Plugin ein cEpgHandler::FixEpgBugs() implementiert, welches "true" zurückliefert? In dem Fall würde nämlich cEvent::FixEpgBugs() nicht aufgerufen werden und damit auch keine Leerzeichen entfernt werden.
Kann es sein, dass bei dir ein Plugin ein cEpgHandler::FixEpgBugs() implementiert, welches "true" zurückliefert?
Nein, das hat bei mir kein Plugin implementiert.
Prinzipiell keine schlechte Idee, aber FixEpgBugs() macht aber noch mehr Ersetzungen, die die Stringlänge auch beeinflussen können. Wenn müsste das dann auch vor ziehen.
Dann hätten aber "EPG-Handler-Plugins" keine unverfälschten Daten mehr. Das ist vermutlich nicht so Ideal.
Bei den Strings ist mir aber auch schon aufgefallen, dass die eigentlich nie schrumpfen können.
Evtl. wäre eine Art trim()-Funktion was, die man bei Bedarf (zB. am Ende vom FixEpgBugs()) aufruft? So kann die Speicherverwaltung dann aufräumen, wenn nötig.
Ob sich der Aufwand lohnt bin ich aber am zweifeln. 10000 Zeichen klingt zwar viel, aber das sind lediglich 10kB. Bei den ganzen Pointern, die so ein Objekt hat, fällt das wohl nicht wirklich ins Gewicht.
Dann sperrt die Speicherverwaltung am Ende vom Block teilweise sowieso ein paar Byte als Puffer. Unter Umständen bringt das Ganze also nahezu nichts.
Unter Umständen bringt das Ganze also nahezu nichts.
Sehe ich auch so.
Don’t have an account yet? Register yourself now and be a part of our community!
