Úprava dat pro kouzelné pero

[luvar]

Dobry den,
mam doma tento HW: https://www.kuzelnecitanie.sk/ Viem o tom, ze to "pero" ma vpredu nejaku OCR vec, čo pozerá mikrotlač (také bodky v maticiach s posunom) a podľa toho identifikuje, kde sa kliklo. Súbory sa tam tuším nahrávajú cez usb, mass storage, viď stiahnuteľné súbory s audio dátami: https://www.kuzelnecitanie.sk/prevziat-audiosubor/

Moje otázky:

• nakoľko tam majú rôzne chyby, rád by som si audio súbory upravil (tie *.bnl súbory). Vie niekto ako na to? (zdá sa, že to je adobe flash technológia, ale to je len môj tip)
• ako sa volá formát tých bodiek a ako to vôbec "googliť"? Dá sa to vytlačiť na dnešných lowcost tlačiarňach? Rád by som sa pohral

[Reklama]

[phrk]

Používám. A obávám se, že pohrát si s tím moc nepůjde. Tužka sice podporuje vlastní audio soubory (wav), pouštěné načtením samolepek, které k ní dodávají, ale samotný princip vzorku čteného (IR) senzorem a struktura binárních bnl souborů vypadá bez jakékoli dokumentace dost neproniknutelně. Rád se nechám vyvést z omylu 

[czipis]

chvili jsem hledal a vypada to, ze to BNL jsou nejakym zpusobem zaarchivovane mp3 soubory, tuzka potom jenom nacte tag a podle hodnoty tagy prehraje tu spravnou mp3.

v tom BNL jsem neasel nejakou referenci na LAME3, takze by to odpovidalo, ale bude to asi nejak obfuskovane.

jinak napr. tady se to da od cinana objednat i se SW
http://kidslearningpen.sell.everychina.com/p-103333026-dolphin-kids-learning-pen-support-mp3-game-tf-card-blue-green.html

[czipis]

pres referenci na "ZC90B (Encript IC)" jsem se dostal az sem:
https://github.com/entropia/tip-toi-reveng/wiki/PEN-Hardware-Details
https://github.com/entropia/tip-toi-reveng

[RDa]

Jak navrhuji kamery tak me zajimalo co je tam za snimac - nasel jsem cinske pera a pak se dopatral az na vyrobce toho modulu, i snimace:

A pak hledajic kde snimac SN9S102C sehnat, jsem natrefil na:
https://cyberleninka.org/article/n/265782.pdf

Design a Training and Maintenance System Based on Code Identification

viz sekci:
3.2. Software Design
There are two software In this design: OIDProducer and SN8Cstudio.


Jinak se tam vysvetluje i kodovani v tisku - kod se nachazi v dvou druzich "cerneho" tisku - vyuziva se kombinace skutecne cerne (K) a falesne cerne (soutiskem CMY), a to co clovek nevidi, to pero dokaze odlisit pod IR svetlem Chytra technologie!

[Reklama]

[luvar]

pres referenci na "ZC90B (Encript IC)" jsem se dostal az sem:
https://github.com/entropia/tip-toi-reveng/wiki/PEN-Hardware-Details
https://github.com/entropia/tip-toi-reveng

Ten projekt vypadá geniálne, ale zdá sa, že na "moje pero" nepasuje :/ Asi skúsim skrutkovač a pozrieť sa na jeho HW.

PS: Písal som aj výrobcovi, ale vyjadrenie je v smere, že na niektoré veci sa pýtalo viac ludí a niekedy ich upravia (zmeny viet/výslovností) a vydajú update (bnl súbor), ale užívateľsky meniť sa to nedá

[luvar]

Zdá sa, že Albi používa E8800 pero. Viď https://www.alibaba.com/product-detail/Wholesale-E8800-language-translation-pen-smart_60767584081.html

Keď budú deti spať, skúsim doplniť výsledky mojeho hľadania. Podľa výrobcu to pero má vedieť aj veci ako "porovnávanie výslovnosti"...

[Ondrej Nemecek]

BTW: S trochou QR kódů a kreativity by bylo možno udělat vlastní implementaci (HW+software)...

[iko]

odporucam pozriet toto, malo by to byt to iste, daju sa robit vlastne zosity, kompilovat vlastne subory...atd...
https://github.com/entropia/tip-toi-reveng/wiki

[czipis]

odporucam pozriet toto, malo by to byt to iste, daju sa robit vlastne zosity, kompilovat vlastne subory...atd...
https://github.com/entropia/tip-toi-reveng/wiki

https://www.youtube.com/watch?v=prEVzshXY6A

[branchman]

Ten projekt tip-toi-reveng nefunguje na "nase" Albi pera. Aj tak poskytne zakladny navod na OID (teda ako tlacit rozne kody). Zostava nam vyriesit, ako funguje firmware pera.

Trochu som sa s tym hral a toto su moje zavery:

Zvuky su v dvoch (troch) miestach - vo firmware a potom v bnl suboroch. Posledna moznost su WAV subory, ktore maju specialne kody, daju sa nahravat a prehravat a je po nich stopa vo firmware. Tie pouzivaju na vlastne nahravky.
Firmware obsahuje nejaky kod a neviem, o aku architekturu ide. Pero u seba nemam - mozno ho skus otvorit a najst typ CPU.
Okrem toho firmware obsahuje zvuky (MP3 subory), ktore nie su nijak chranene a struktura sa da zistit tym, ze sa na to pozries. V strukture ide o offsety do suboru a mensie detaily k tomu. Neskusal som to, ale prepisat data vo firmware by malo byt mozne.

BNL su narocnejsie. Tiez su v nich ulozene komplet MP3 subory. Su chranene "specialnou" ochranou, ktoru uz len podla struktur tipujem a opisem ju tu. XORuju sa niektore byty. Pozor, nie vsetky. Vyzera to, ze 0x00 a 0xFF nechavaju tak ako boli; offsety a XORy okrem toho vyzeraju na prvy pohlad nahodne. Podla ocakavanej struktury MP3 sa zda, ze ziskaju prvu hodnotu z hlavicky - tu hodnotu este viem zistit. Z tejto hodnoty generuju keystream a offsety, ktore sa maju XORovat. Aby sa keystream nedal prenasat medzi roznymi BNL suborami, tak funkcia keystreamu vyzera nejak takto:
key(n+1) = neznama_funkcia(key(n), ?)+cislo_bnl
takze z keystreamu jedneho BNL pri znalosti key(0) sa da spravit keystream pre druhe BNL s rovnakym key(0), offsety boli tusim tiez rovnake.
Odvodenie dalsich klucov nie je uplne zrejme - skusal som kongruencie nasobenia mod nieco a jednoduchsie "sifry", ale nic mi nevyslo. Je to vzdy jeden byte, takze ani nie je velmi co skusat.

Velmi problematicke pri analyze je to, ze nie je pristupny desifrovany subor, takze moje tvrdenia o BNL stoja na vode a na pozerani do suboru. Keby mal niekto cas a HW na vycitanie komplet firmwaru z pera (teda co sa naozaj vola), tak by to dost pomohlo. Skusal som zistovat, ako sa tam firmware nahrava a cez to som este uplne nepresiel.

[branchman]

BTW: S trochou QR kódů a kreativity by bylo možno udělat vlastní implementaci (HW+software)...

To si este nevidel to pero a knihu. Tie bodky tam su uplne male, takze to bezne clovek okom nepostrehne. Takze dieta naozaj ukaze na obrazok a pero nieco povie.

Inak z pohladu samotneho citania OID (identifikatorov v obrazkoch) to nie je pre mna az take zaujimave. Teda dobry napad, ale je na to cip, ktory uz posiela vysledne ID a do toho netreba az tak rypat. Mna by tiez zaujimalo, ako funguje to spracovanie BNL.

[jinylojza]

chvili jsem hledal a vypada to, ze to BNL jsou nejakym zpusobem zaarchivovane mp3 soubory, tuzka potom jenom nacte tag a podle hodnoty tagy prehraje tu spravnou mp3.

Takhle úplně jednoduchý to neni, protože ty zvuky se přehrávají podle nějakého vnitřního stavu tužky ve kterém je pravděpodobně aktivovaná kniha, předchozí označené tagy, výsledek nějakého generátoru náhodných čísel. Ty tagy nejsou globálně unikátní, ale jen v rámci knihy, takže se kniha musí aktivovat načtením tagu, načtením tagu se dá přehrát více různých zvuků dle předtím zvoleného režimu, které se taktéž udělá načtením tagu. Načtením tagu se dá spustit kvíz různé složitosti, který vygeneruje (pseudo)náhodnou posloupnost otázek, na které se odpovídá označením tagů, které to vyhodnocuje, umožní to opravu chybné odpovědi a vyhodnotí to celý test. A tohle v tom BNL musí být nějak zaznamenáno.

[luvar]

Moja "rozborka" HW. Súčiastky na hlavnej doske plošáku z pera E8800:

Strana zadná (bez tlačidiel):
* SONIX SN95303FG 1866ATD6a ??e3
* SONIX SNAP01ASG 186SMCZ01 ??e3

Strana predná (tlačidlá a mikrofón):
* NX1C MX 25L3233F M2I-08G 5C294700 L182424
* ZC90B 186SNCZ03 ??e3
* FT24C02A 8KHKF

Pri čítaní popiskov súčiastok som došiel na hranu mojej optiky (oči, Sigma 30mm a aj SELP1650 zlyhávali). Sú tam možno preklepy. V každom prípade dám dokopy fotografie a hádam najneskôr zajtra pošlem aj foto a popis k rozoberaniu (kde sú záklapky).

PS: tie dvojice otáznikov sú nejaké stromčeky, alebo čo za znaky

[luvar]

Upravené dva popisky (použil som skener s 1200 dpi a dve súčiastky sa dali opraviť)

Strana zadná (bez tlačidiel):
* SONIX SN95303FG 1866ATD6a ??e3
* SONIX SNAP01ASG 186SMCZ01 ??e3
Strana predná (tlačidlá a mikrofón):
* MXIC MX 25L3233F M2I-08G 5C294700 L182424 <- zmena
* ZC90B 186SNCZ03 ??e3
* FT24C02A 8KHIfF <- zmena