Příspěvky

1096

Hardware / Re:Monitor setup

« kdy: 17. 01. 2020, 09:35:00 »

docela vas obdivuju i kolegu co ma display notebooku, monitor na sirku a monitor na vysku.
ja stejne cumim do obrazovky notebooku a monitoru mam maximalne mejly a dalsi monitor mi lezi ladem.
a to mam spusteno nekolik kusu IDE i terminaly s VIM :-)

1097

Vývoj / Re:C, zápis do pole čísel a zápis mimo cache L1/L2

« kdy: 14. 01. 2020, 22:24:06 »

golang, naplneni mapy 40 miliony uint64 a pak 600 milionu prohledavani v mape, cisla jdou za sebou.
jedno vlakno na i9-8950hk, cas procesu 42 sekund.

--------------------------------------------------
package main

import "fmt"

func main() {

var slovnik = make(map[uint64]uint64)

var i uint64


for i = 0 ; i < 40000000; i++ {
   slovnik\[i\] = i+4
}

nalezeno := 0

for i = 0 ; i < 600000000; i++ {

_, ok := slovnik\[i\]

if ok {
   nalezeno++
}

}

fmt.Println("nalezeno=",nalezeno)
}

1098

Vývoj / Re:C, zápis do pole čísel a zápis mimo cache L1/L2

« kdy: 14. 01. 2020, 21:57:13 »

Viz:

data se stejně ukládají do pole rychlostí asi 2 GB/s a za hodinu se nezaplní víc než několik 5-7 TB prostoru

To jsou běžné hodnoty na kontroléru (na vstupu), tedy "běžný vstup" je řekněme miliony čísel na vteřinu.
Špičky jsou jinde, navíc je to celé rozložené mezi víc strojů a ověření je jen jednou z úloh zpracování.
Zajímavá by byla možnost i opakování dávek z předchozích dnů. Nicméně, pokud zlepším propustnost celého systému, mohu žádat o víc dat = dostanu víc peněz. A popravdě o to tu jde v první řadě, trochu to zefektivnit nebo se na to podívat říct "líp už to nejde", pak vím, že to musím hnát počtem strojů, které se musí nejen napájet, ale i chladit...

OK, zkusím si tedy vydedukovat, jak rychle to tedy opravdu zpracováváš, tím, že budu ignorovat tvůj první příspěvek o dvou miliardách porovnání za vteřinu, a spočtu si to z těch 2GB/s.

2GB/s ~= 30 000 000 testovaných 64bajtových čísel za vteřinu.

Zkusil jsem si to bez větších chytristik naprogramovat v Rustu.

Slovník 10 000 000 čísel (tím o něco překračuji těch 400MB slovníku, co jsi někde zmiňoval), test kdy je jeden hit na 9999 misses.

Stroj: Intel(R) Core(TM) i5-2400 CPU @ 3.10GHz, čtyřjádro, tedy dneska skoro kancelářská plečka

Program běží ve čtyřech vláknech.

V opravdu jednoduchoučké verzi dosahuji cca 37 000 000 testů/s

S menší chytristikou se dostanu na 55 000 000 testů/s

Víc jsem nezkoušel, už takhle jsem tím dneska promarnil skoro čtyři hodiny (to se mi nemělo stát, že se objevil takovýhle zajímavý problém)

Jsou to zajímavá čísla, nebo ne? Kolik to teda dělá tobě?

psalo se tu o ruznych algoritmech, co's pouzil ty?
slovnik je v RAM?

1099

Vývoj / Re:C, zápis do pole čísel a zápis mimo cache L1/L2

« kdy: 12. 01. 2020, 23:11:00 »

to budou takove ty super-rychle obchodovaci operace na ruznych internetovych burzach ne???

1100

Vývoj / Re:C, zápis do pole čísel a zápis mimo cache L1/L2

« kdy: 12. 01. 2020, 08:30:52 »

https://softwareengineering.stackexchange.com/questions/280339/fastest-way-to-determine-if-a-value-is-in-a-list

1101

Vývoj / Re:C, zápis do pole čísel a zápis mimo cache L1/L2

« kdy: 12. 01. 2020, 08:25:27 »

predesly kolega se pta spravne, zkratim to na dotazy:

* meni se slovnik?
* vleze se slovnik cely do ram (podle me to je 6GB) ?
* kolik mate jader, ze by mohl byl slovnik v ramce a jadra by prohledavaly paralelne.
* pouziti clusteru, knihovna MPI.
* pouziti paralelizace na GPU.

1102

Sítě / Re:Tunelování VPN

« kdy: 10. 01. 2020, 07:28:55 »

na svem routeru si musite povolit preposilani portu do svoji site 192.x.x.x.
takze jednim vpn se dostanete do site 10.x.x.x provozovatele a pak na svoji IP v 10 siti
a skrz vlastni router do sve site.

1103

Sítě / Re:Datová síť v novostavbě

« kdy: 09. 01. 2020, 15:38:41 »

optiku a opticky switch :-)

1104

Software / Re:Dekodovaní SSL Wiresharku z dat Charles proxy (SSLKEYLOGFILE?)

« kdy: 08. 01. 2020, 07:17:56 »

charles proxy neznam.
do wiresharku muzete nahrat privatni klic RSA a wireshark pak umi zobrazit TLS/SSL komunikaci.

pokud ma ten charles proxy nejake dalsi veci nad zakladnim SSL/TLS  tak to uz wireshark
sam neumi, jedine si napsat vlastni dissector.

1105

Vývoj / Re:Go Lang: DB vrstva a migrace

« kdy: 07. 01. 2020, 14:03:41 »

musite mit db?
nejde pouzit jiny typ uloziste?

https://github.com/dgraph-io/badger

1106

Vývoj / Re:Rýchly vývoj administračného rozhrania

« kdy: 06. 01. 2020, 22:54:51 »

to Ultimate++ je zajimave. ne ze bych to vyuzil, kdyz pouzivam Qt, ale kdyz se nekdo nechce ucit Qt tak to U++ muze byt fajn. existuji i nadstavbove widgety nad Qt, takze se da prace s vytvarenim GUI ulehcit.

1107

Studium a uplatnění / Re:Kam po ZŠ?

« kdy: 06. 01. 2020, 17:06:32 »

Kousek do diskuse - pozdeji v praci jsem mnohdy potreboval prave ty predmety, ktere me na skole nebavily. Pravda, slo spis o VS nez stredni. Pointa je v tom, ze studijni plan me donutil naucit se i to na co bych se jinak vykaslal.

A divim se, ze nezaznela jeste dalsi dulezita vec - spoluzaci.
1. Na gymplu budes mit i spoluzacky a nebude jich malo. Kamosi z prumyslovek meli na cele skole min holek nez my na gymplu ve tride.
2. Znami - lidi se rozprchnou a z gymplu budes mit kamarady a zname v mnohem vetsi skale profesi.

kazdy ma nejakou zkusenost, ja jsem zase delal prumyslovku a specializoval jsem se na to co me fakt bavilo.
a v zivote pracuju v technickych oborech, takze mi dejepis nechybi :-)
dost spoluzaku z prumyslovky dela neco uplne jineho nez studovali, takze je to taky docela pekny rozptyl profesi.
kdyz chces delat to svoje a nechces se otravovat jinyma predmetama, tak bych sel do specializovane skoly.

1108

Hardware / Re:Redukce USB na SATA Power (ne data)

« kdy: 05. 01. 2020, 15:40:05 »

Akorát počítejte s tím, že se tak dá napájet jen 2,5 palcový HDD, velký 3,5 HDD potřebuje i 12V větev.

to bych pochyboval, mam adapter na sata s datovym a napajecim Y USB kabelem a jde pripojit i 3.5'' disk.

1109

Hardware / Re:Redukce USB na SATA Power (ne data)

« kdy: 05. 01. 2020, 13:11:24 »

nejen na alze je toho hafo, jsou i vetsi krabicky s vice ruznymi sloty.

https://www.alza.cz/search.htm?exps=sata%20usb%20adapter

1110

Distribuce / Re:Vymazání HDD před prodejem NB

« kdy: 23. 12. 2019, 20:19:00 »

Kup nové SSD, vlož místo původního HDD, který si ponecháš na zálohy.

souhlas, jednoduche a nejlepsi metoda.