Automatizovaný streamer a rekordér TV

[curlyboi]

Ahoj spolucentriáci.

TESTOVACÍ VERZE:
http://tv.100dola.eu/public/

Mám teď rozjetý drobný projekt a zajímalo by mě, jestli by byl zájem to rozvádět a případně uveřejnit zdrojáky.
Jedná se o prográmek, který simuluje STB na PC. Dokáže nahrávat pořady do nativního streamu TS a také streamovat kanály přes Internet. Podmínky jsou .NET 4, VLC player a dvě síťové karty (jedna se chová jako STB, druhá normálně do Internetu, aby se na to dalo dostat odkudkoliv). Samotné jádro je napsané v C#.NET a operuje na PC jako backend, který dynamicky spouští procesy VLC a provádí potřebné akce. Druhá část je frontend v PHP, který umožňuje přidávat nahrávané úlohy a zobrazovat živý stream.

Co zatím nemám vyřešené (ale pracuji na tom) je jednak DRM některých kanálů a druhak automatizované tahání EPG (tam už jsem na dobré cestě).

Pokud vezmete PC se dvěma síťovkami, uděláte mezi nimi bridge, vypnete na bridgi všechny softwarové protokoly (IPv4, IPv6, Klient sítě Microsoft atd) a do jedné zapojíte STB a do druhé přívod od Centria, můžete sledovat veškerou komunikaci STB s Centrálním serverem MW1.CENTRONET.CZ. Z něj lze nejen stáhnout seznam všech kanálů, ale také získávat EPG. Dále je z něj možné odposlechnout tzv. ID settopboxu, které lze pak použít k vydávání se za tento STB a tahání STB i z jiného PC.

Co se týče DRM, vím, že STB mají implemetnovanou funkci Verimatrix, které je ale upravená tak, že odkaz na centrální francouzké servery Verimatrixu jsou přesměrované na lokální IP Centronetu, kde běží jejich vlastní ověřovací server, který poskytuje potřebný soukromý klíč k šifrování. Vzhledem k tomu, že když na jeden kanál koukají dva STB zároveň, posílá se jeden a ten samý stream, troufám si tvrdit, že získaný klíč není dočasný, ale permanentní a tudíž by měl fungovat všem, jakmile bude získán. Nevylučuji ovšem možnost, že pro různé kanály budou různé klíče.

Podařilo se mi odchytnout také firmware update HD settopboxu (bezdiskového) a rozbalit si adresářovou strukturu. Zdá se, že STB jsou postaveny na architektuře MIPS a běží jinak na linuxu. Pokud je tu někdo, kdo by dokázal dekompilovat ELF binárku pro architekturu MIPS a vyznat se v dekompilovaném kódu, dokázali bychom zpětně rozložit a zanalyzovat chování ověřovacího programu Verimatrix, a donutit ho, aby nám klíče někam vypsal. Odkud by mohly být vyextrahovány a použity ve VLC.

STB také poslouchají na portu 23 na Telnet příkazy z řídícího softwaru Centria. Pokud by se někomu povedlo odposlechnout toto přihlášení, měli bychom root přístup do STB a dekompilovaní by nemuselo být nutné.

Na závěr pár screenshotů z prototypu:
http://files.100dola.eu/1369573438

[x-rated]

ahoj,
ježkovy voči, to sou věci polovině z toho sice vůbec nerozumim, ale vypadá to zajímavě a pokud by se povedlo vytvořit nějaký uživatelsky přívětivý cosi, tak by to bylo super
jenom si nejsem jistej, jestli ti s tim bude schopen někdo odsud pomoct, protože to vypadá celkem složitě a asi to neni pro úplně každýho programátora
pak je taky otázkou, do jaký míry je to správný řešení z pohledu centronetu, mohlo by se stát, že se to někomu nebude líbit, vyjde nějaká aktualizace a fungovat by to přestalo...
hlavně se mi moc nezdá to, že by měli všichni přístup k nějakejm těm šifrovacím klíčům pro všechny nadstandardní kanály - to by si jako moh kdokoliv se základní televizní nabídkou pustit hbo? pokud by to ale fungovalo jenom těm, co si to platěj, tak by v tom snad problém bejt neměl, když se to bude tvářit a chovat jako standardní set-top box... těžko říct, já tomu prd rozumim, tohle už je trochu jinej level

[curlyboi]

To, jestli máš program zaplacený ovlivňuje, jestli ho vůbec "naladíš", tzn. jestli ti brána pustí stream.

Já jsem vyjadřoval odhad, že všichni klienti, kteří mají kanál zaplacený, používají stejný klíč. Nejde tu tedy o nějaké prolomení kanálu, který bys neměl mít možnost vidět, ale naopak zpřístupnění již korektně zaplaceného obsahu, pouze na jiném hardwaru. To není nic nezákonného, mohlo by to být ovšem porušení podmínek, mám tušení, že je tam nějaká klauzule o provozování neschváleného hardwaru.

[x-rated]

aha, dobrý
otázkou je, co je neschválenej hardware a jak přesně je to tam napsaný, např. na net má taky každej svůj vlastní router

[curlyboi]

Pravda, pamatuju si, že na to přišla řeč, když jsem tam byl před několika lety na pracovním pohovoru kvůli těm svým hackům )

[x-rated]

a pročpak si tě nenechali?

[curlyboi]

Na nějaký čas nechali. Byla to taková příjemná pomaturitní brigádka. Ale pak jsem šel na VŠ, takže nebyl čas. A na to, že to byl v podstatě fulltime, tak to taková bomba (finančně) nebyla...

[curlyboi]

Update situace:

Backend už je prakticky hotový - dokáže streamovat i nahrávat libovolný počet kanálů najednou.
Zároveň jsem rozlouskl EPG, takže už mám funkční grabber údajů o pořadech ze sítě Centria
do databáze programu.

Teď se snažím to nějak napasovat na XBMC (aby to nebylo jen jako sada streamů, ale plnohodnotné
PVR s možností sledování, co kde běží a možností vytváření nahrávacích úloh přímo z GUI).

Dekódování šifrovaných streamů jsem zatím odložil na neurčito, bude to ještě oříšek.

[x-rated]

šikula, jen tak dál hlásim se k dobrovolnýmu testování, až to bude možný, dvě síťovky mám
jinak teda taky mi domů vedou dva kabely - jeden čistě na net (neprochází switchem) a druhej na televizi a telefon, odtud mám nataženej kabel do druhý síťovky...

[curlyboi]

Tak mně vede jen jedna, ale mám ze switche vytažené dva kabely, to bohatě stačí... Ale to je taky tím, že mám jen 50Mb. Už to budou 4 roky, co nám to zapojili

[x-rated]

to je tou padesátkou... já jenom, aby tam nebyl nějakej problém, ale neměl by

[curlyboi]

Brzy budu releasovat první veřejnou verzi svého softwaru. Ocenili byste k tomu i manuál, jak nainstalovat webový server (apache+php+mysql) nebo stačí jen instalace toho programu?

Umí nahrávat a streamovat libovolný počet kanálů najednou, dotahovat si EPG, ze kterého se pak dají naklikávat do plánovače úlohy atd.

[x-rated]

Ocenili byste k tomu i manuál, jak nainstalovat webový server (apache+php+mysql)?

to k tomu bude taky potřeba?

[curlyboi]

No protože je to navržený tak aby se to dalo ovládat z webu odkudkoliv. Chápeš, máš doma puštěnej server a z mobilu si vyrobíš nahrávací úložku.

[x-rated]

aha, a nedá se k tomu nějak využít webhosting, kde už tyhle věci sou?

[curlyboi]

Ano, dá.

Jen je potřeba, aby se dalo připojit na databázi z jiného stroje...
Tzn. běží MySQL server na nějakém hostingu, ale připojuješ se na něj z toho nahrávače.

[x-rated]

a btw to musí mít každej uživatel svoji databázi a svůj server nebo by se to dalo nějak spáchat třeba tady na centriozone pro víc lidí?

[curlyboi]

To by se asi dalo, ale nedoporučoval bych to. Když si to každý uživatel dělá sám za sebe, tak je to i licenčně víceméně OK.
Jakmile to centralizujeme, tvoří se rizika... právní i bezpečnostní.

[x-rated]

každopádně by to chtělo udělat asi víc user-friendly, protože ne každej uživatel má svůj hosting / server a ne každej si bude instalovat na počítač webserver... a když už, tak ne každej bude ochoten mít zapnutej komp většinu dne nebo až pozdě do noci, aby mu ty věci fungovaly to je trochu zapeklitá část na tom všem

[curlyboi]

No jak bys to jinak chtěl udělat. Stejně to nahrávání obstarává ten komp. Takže ikdyby to nebyl webserver, stejně vypnutej komp nic nenahraje.

[curlyboi]

Do prvního příspěvku jsem přidal link na testovací verzi.

[x-rated]

bylo by fajn (než se do toho pustí taková lama jako já), aby se tu objevil fischlk nebo blackwire žijete?
koukám, že tohle bude na dýl, já to testnu nejdřív zejtra (jestli nenarazim na nějakej problém), což asi narazim, protože nevim, jak některeý věci nastavit na tom php u hostingu

[curlyboi]

Nemělo by to vyžadovat nic speciálního a ve složce manual je dost podrobný návod jak to všechno nainstalovat.

[curlyboi]

Nějak mi nedošla dementnost myšlenky nahrát www soubory normálně do adresáře:D Takže jsem tam místo toho dal www.zip, který obsahuje všechno, co je třeba nahrát na web.

[x-rated]

já nejdřív dotestuju tenhle tejden ty svý výpadky, jak o nich píšu vedle, abych moh dát týpkovi vědět a dalo se to řešit dál, takže si zatim jenom nachystám subdoménu a databázi ale už teď se bojim, že to nedám

[curlyboi]

Tak se tu zeptáš, no... Aspoň se odhalej nějaký nedostatky v manuálu, takže to tam budu moct dopsat.

[x-rated]

tak špatná zpráva... jelikož se za celou dobu nepovedlo vyřešit ty moje problémy s občasnejma výpadkama televizního signálu, zapínají na dva tejdny nějakej větší monitoring, tudíž nebudu do switche na televizi a telefon strkat kabel pro komp, páč jak sem už psal, v minulosti to způsobovalo čas od času zámrzy

[fischlk]

zajimave reseni - uz jsem si nejak na nahravani odvykl (mam teda stary stb co jeste umi nahravat na disk ale je to takove divne stale... upc stb uz jsem oplakal )

[curlyboi]

Dobrá zpráva - dodělal jsem script který dynamicky generuje XML pro XBMC se seznamem kanálů. Do XBMC tedy stačí zadat jedinou URL a automaticky bude zobrazovat seznam kanálů ke streamingu včetně ikonek.

[x-rated]

špatná zpráva je, že mám zatim pořád výpadky a pořád zapnutej monitoring, tak zatim žádný pokusy s tv v kompu nedělám

[curlyboi]

Nějaký novinky s tímhle? Už to mám celkem vychytané, táta s tím normálně nahrává pořady, já si zas sleduju kabelovku kdekoliv na netu...

[x-rated]

novinky sou dobrá zpráva je, že je po výpadcích za standardního napojení všech standardních zařízení... špatná zpráva je tady

[curlyboi]

Asi začnu pracovat na verzi, která nevyžaduje webový server a měla by tudíž fungovat sama o sobě. Byl by zájem?

[x-rated]

tak zájem by byl, ale viz moje špatná zpráva, na kterou vede odkaz nad tvym příspěvkem to nevim, jestli se mi povede nějak vyřešit, když tady pořád někdo čučí na televizi

[drcuul]

Ahoj, mohl bych poprosit o přístup k současné verzi toho software? Rozběhal jsem si doma podobný "rekordér" pomocí Team Media Portálu (www.team-mediaportal.com) k poměrně velké spokojenosti ale problém je s daty pro EPG. Takže by mě hlavně zajímal ten grabber Když jsem se koukal na komunikaci STB se serverem ze kterého program tahá tak to vypadá relativně pochopitelně a původně jsem plánoval to si ho napsat, ale jestli už existuje ...
Počítám, že bych to zkusil použít a jestli to půjde tak bych vyrobil nějaký step by step návod na instalaci a konfiguraci řešení pomocí TMP. Díky

[curlyboi]

Jestli je to ještě aktuální dotaz tak tady viewtopic.php?f=12&t=419 je nové řešení, a scripty na grabování jsou tam v php a shell scriptech