Příspěvky

1

Server / Re:Cassandra a horizontální škálování

« kdy: 12. 03. 2023, 13:36:38 »

Díky za odpověď!
Nenapadlo by mě nastavit RF 50 v clusteru který má 50 nodů
3 v rámci "racku" stačí.
Ty 3 bych chtěl synchronní i za cenu, že si počkám na potvrzení všech.

Dá se nastavit asynchronní replikace pro nody, které jsou v jiném DC?

ked mas RF = 3 a write robis s CL QUORUM, tak write coordinator caka len na dva zapisy z troch (quorum z 3 je 2) takze jeden node moze byt dole.

Az ked mas RF = 3 a CL = THREE tak to caka na vsetky. Nevyhoda THREE je, ze ked mas jeden node offline, tak cela query failne (pretoze to proste caka na tri uspesne zapisy).

Nic ako "synchronne a asynchronne zapisy do druheho DC" neexistuje. Okrem QUORUM mas este EACH_QUORUM. To znamena ze to zapise na kvorum nodov V KAZDOM DC. Normalne QUORUM mas quorum nodov cez vsetky nody a je jedno v akom DC.

Este existuje LOCAL_QUORUM. To znamena, ze to bude cakat len na zapisy v lokalnom DC (a len odtial bude citat) a koordinator bude vzdy node z toho DC.

Ak mas RF = 3, CL = QUORUM a jeden node je dole, tak query ako taka bude OK. Tie mutacie ktore sa nezapisu na ten node ktory je dole - pre tie sa ulozi tzv. HINT. Ked ten offline node znova rozbehnes, tak tie nody automaticky poslu tomu nodu co je naspat online vsetky hints. Je dobre potom spravit repair.

2

Server / Re:Cassandra a horizontální škálování

« kdy: 12. 03. 2023, 12:59:44 »

Este by som dodal ze tvoja posledna veta "pocet nodov je dan replikacnim faktorem" nie je uplne spravna.

Ak mas cluster, ktory ma 50 nodov, tak tvoj RF nemusi byt 50. To sa v praxi vobec nerobi. Staci ak mas RF napriklad 3 alebo 5. Je jedno, ze ked ma cluster 9 nodov, tak to musi mat RF = 9, to nerob. RF = 3 staci.

Co je dolezite je tvoj consistency level ktory pouzivas pri queries.

Pri RF = 3 alebo 5 je dobre pouzit CL QUORUM. To znamena, ze vacsina nodov musi byt online aby tvoja query presla. (1 node z 3 moze byt offline resp. 2 nody z 5 pri RF = 5 a CL = QUORUM).

3

Server / Re:Cassandra a horizontální škálování

« kdy: 12. 03. 2023, 12:44:06 »

ked pridas do clusteru novy node, tak to by defaut spravi toto:

1) kontaktuje seed nodes a zisti topologiu (gossip)
2) v nodetool budes vidiet stav UJ (Joining)
3) nauci sa to zo seedov aka je schema
4) ked sa node pripoji do clusteru, tak sa automaticky zmenia tokeny (tento novy node zacne vlastnit tokeny ostatnych nodov)
5) stream dat z ostatnych nodov na tento novy node podla tokenov ktory zacal ten novy node vlastnit
6) ked je hotovo status sa zmeni na UN

Takze pri pridani noveho node si proste ten novy node "stiahne" data k sebe a zmeni sa token ring.

Tie stare nody ale tie data ktore uz nevlastnia stale budu obsahovat. Tieto data musis z kazdeho nodu vymazat. To sa robit cez "nodetool clean".

Statistiky a progress streamingu zistis cez nodetool netstats


Predpokladam, ze mas nastavene "num_tokens: 16" ale podobne cislo (napr. 256, v neskorsich verziach sa zmenilo 256 na 16).

Ked toto nepouzivas a pouzivas "initial_token: ..." tak to je omnoho zlozitejsie kedze si tie tokeny musis komplet nakonfigurovat sam.

4

Software / Re:Sběrač obrázků (souborů) z r ůzných online prohlížeček

« kdy: 22. 02. 2023, 17:03:17 »

toto sa vola scrapping a potrebujes na to scrapper.

ked som mal 20 tak som si napisal scrappera na jednu porno galeriu. Bolo to dost premakane, bolo to v Springu a tahalo to cele galerie v x treadoch zaroven a ukladalo obrazky na disk a metadata o nich do mysql (nazov galerie, rozmery) takze som spravil select na "big tits" a vratilo mi to vsetko ...

asi 300 GB som takto potahal.

Problem je ze scrapping je nachylny na zmenu struktury odkial sa to taha. Ak crawlujes web po elementoch a oni to prerobia tak to musis riesit ze niekam pridali div atd ... je to otrava ale urcite implementovatelne.

Hodim ti sem nazov kniznice cez ktoru som parsoval html elementy ked budem doma

5

Studium a uplatnění / Re:Zkušenosti s indickými kolegy vývojáři

« kdy: 21. 02. 2023, 09:19:42 »

Su dva druhy Indov. Ti, co robia v menezmente a ti co programuju.

Indicky manager / obchodnik / tlchuba je majster ojebu. Ten by ti predal aj vlastnu matku. Ten ti dokaze odprezentovat aj uplne nefunkcny produkt ze ake to je super. Pani improvizacie. Istym sposobom to je fascinujuce a ked robis na strane dodavatela tak mat indickeho produktoveho menezera je dost vyhra. Proste cigan na trhu.

Potom su vyvojari a tam to zalezi ale ja som sa stretol len s absolutne neschopnymi. Oni nevedia nic. Ani pouzivat nastroje. Nic.

6

Studium a uplatnění / Re:Zákaz konkurence

« kdy: 12. 02. 2023, 20:34:16 »

Ked ta fakticky zazaluju a dostanes tu pokutu a daju to na sud (vsetky tri podmienky ze sa stanu sa limitne blizia k nule) AZ POTOM to zacni riesit. Nie dopredu.

To co si podpisal nie je zmluva s Vatikanom a nikto ti nemoze branit v obzive. Rovnako uz nie je nevolnictvo a nemusis robit pre nikoho do aleluja.

Ako by oni vobec zistili, ze pracujes pre konkurenciu a na com vlastne? Ak by ta aj zalovali, tak by museli prist s dokazom, ze pre terajsieho zamestnavatela vykonavas uplne rovnaku pracu. Toto ako zistia? Ved to je obchodne tajomstvo medzi tvojim novym zamestnavatelom a tebou.

Staci ked zmiznes (na nejaky cas) z Linkedinu a prestanes im odpovedat na telefon a hotovo.

7

Studium a uplatnění / Re:Zákaz konkurence

« kdy: 12. 02. 2023, 20:23:20 »

Neskutocne zvasty s blabolmi co sa tu clovek docita ... toto sa riesi tak, ze si sefa zavolas na debatu kde mu vyklopis nech sa spamata a je po probleme. Nikto vas za nic nebude zalovat ze sa porusuje nejaka konkurencia ci co ... Jasne, uz kazda firma len caka na to, ze sa bude zahadzovat s nejakym juniorom, ze odisiel z roboty. Pane boze to kde zijete? Ak by niekto mal opat blbe reci tak to nie je nic co by opat nevyriesila jedna asertivna debata. Mne sa zda ze dotycny je pripo... dopredu.

8

Server / Re:K8s, PostgreSQL a replikace na tři nody

« kdy: 26. 01. 2023, 13:50:46 »

Vždyť to je naprosto něco jiného a ještě poměrně složitého na provoz, nevím, proč v poslední době jí tolik lidí vytahuje z hrobu a snaží se na tom stavět projekty a pak si volají o pomoc, když jim to nejde. To je stejně slepá cesta jak mongo, hbase aj.

absolutne netusis o com hovoris Cassandra je vsetko len nie mrtva.

Cassandra 5 bude mat ACID transakcie. Na indexy mas SAI (storage attached index).

Mongo je hracka projekt, to nikto nemoze na produkcii mysliet vazne.HBase ma iny usecase.

Mne pride uplne do popuku ze sa tu riesi replikovany postgres ked toto vyriesili ine DB s prstom v nose pred 10 rokmi.

9

Server / Re:K8s, PostgreSQL a replikace na tři nody

« kdy: 26. 01. 2023, 09:03:43 »

Uplne vsetci na to idu zle.

Vymyslas ohybak na narovnavak.

Toto ti nebude fungovat spolahlivo a uz vobec to nebude skalovat. Co ked tych nodov budes potrebovat 25?

Chces master-less architekturu.

Odpoved je Apache Cassandra.

Su na to aj operatory.

10

Desktop / Poraďte zajímavé využití RAM disku v Linuxu

« kdy: 20. 01. 2023, 06:53:49 »

Zdravim,

mam 64 GB RAM na mojom desktope a spomenul som si, ze v Linuxe sa da jednoducho spravit z RAM dalsi disk.

Spravil som si skusobne novy mount na 4GB a nastavil som IntelliJ IDEA tak, aby tam bola cache a indexy a je to celkom svizne. PC skoro nikdy nevypinam, len hibernujem. Ak restartnem PC raz do mesiaca tak som ochotny podstupit re-indexaciu pri novom starte. Ten tmpfs do ramky mam vo fstab.

Zaujimali by ma vase aplikacie tejto techniky, takze by som mohol zrychlit takymto sposobom PC este viac.

11

Studium a uplatnění / Re:Práca IT vo Švajčiarsku

« kdy: 04. 01. 2023, 09:15:28 »

Presne tak, mas ten dlh splatit. Mna fascinuje, ze sa najdu ludia, ktori obhajuju, ze vlastne byt zadlzeny je uplne super

Ok. tak uz aspon vime, ze jsi naprosto mimo.

Co je mimo na tom nemat dlh? mimo je zit na dlh.

Opakujem to sto krat, mna nezaujima ze si servisujem dlh a chcem viac a viac a viac a viaaaaaaac penaziiiiiii Ja chcem slobodu, nie peniaze.

12

Studium a uplatnění / Re:Práca IT vo Švajčiarsku

« kdy: 04. 01. 2023, 09:00:20 »

Presne tak, mas ten dlh splatit. Mna fascinuje, ze sa najdu ludia, ktori obhajuju, ze vlastne byt zadlzeny je uplne super

Tak si poloz otazku, co by sa stalo, ak by vsetci splatili svoje dlhy a nakupovali by co najviac za hotove -> tento system postaveny na dlhu by padol z vecera do rana. Tym co robis len zivis toto nekonecne ponzi a si sam sucastou tejto zvratenej filozofie nekonecneho rastu.

Preco napriklad v arabskych krajinach je zakazany urok? Pretoze vedia ze to je uplna rakovina.

Papierovi milionari ... Ovladol vas mamon a chamtivost. Barak za 20 mega na splatky :DDDD Splatkovi krali ... boze. Ved ty svoj zivot nevlastnis ale mas ho pozicany a banka ta drzi za gule, to musi byt super pocit.

13

Studium a uplatnění / Re:Práca IT vo Švajčiarsku

« kdy: 03. 01. 2023, 23:26:41 »

i kdybys náhodou se dostal do nouze, tak to můžeš i při propadech po částech vybírat, je to relativně likvidní, nemůžeš prodat 1/100 nemovitosti za 3 dni, abys měl zítra na jídlo.

Pro tebe nejhorší situace je, když se dostaneš do stavu likvidní nouze. Teoreticky můžeš mít třeba byt, ale vyhodí tě v práci, onemocníš a žádná banka ti nepůjčí a jsi najednou ve stavu likvidní nouze. Nikdo ti nepůjčí pod 100% RPSN a byt prodáš na rychlo tak za 50% ceny.

Samozrejme ze ked to splatim tak mam likvidny kes poruke. To by som bol dobry blb ak by som isiel "nadoraz". Rovnako ako by som bol blb ist nadoraz s hypotekou (podla mna vacsina ludi na sk / cz scene v reale "nema na hypoteku", vela ludi islo totalne na kost).

Mam par rokov kesu bokom (po splateni hypoteky).

Z mojho pohladu, ak ma clovek volne prostriedky tak splatit dlh je to najlepsie co moze spravit. Odkedy zacal byt dlh cool? Dlh je otrasna gula na nohe a zacali sme sa tvarit ze inak sa ani neda fungovat. Dlh je rakovina tejto doby.

14

Studium a uplatnění / Re:Práca IT vo Švajčiarsku

« kdy: 03. 01. 2023, 14:04:05 »

Ved pokoj mozes mat , to ti gratulujem a potom ked uz budes mat ten pokoj tak co akoze? Kupis si noveho superba a zacnes chodit za stetkami? No asi nie , zachvilu zacnes zas riesit co dalej a kam  otocit prachy. Ja pokoj neplanujem mat, jedine co planujem je mat co najvacsi cashflow a dobru vyplatu aspon do 60 tky aby som si uzival zivot, venoval sa konickom ,mal dobre auto a aby ked ma klepne aby som mohol odist s pocitom dobre vykonanej prace a tym ze som nechal synovi pekne "mneni". To ma naplna viac ako mat pokoj. Urcite som nechodil do prace a nestudoval preto aby som zaplatil 1 byt a zomrel.

kamo sorry ale ty si strasne obmedzeny Skus na tom popracovat. Tak za par rokov zasa budem mat par sto tisic a kupim si este jeden byt alebo to dam do zlata alebo zainvestujem ... Co riesis? Ja hovorim o tom, ze ked si nieco mozem kupit, tak si to kupim. Preco by som na to mal cakat 30 rokov. Si to rovno kupim ne?

15

Studium a uplatnění / Re:Práca IT vo Švajčiarsku

« kdy: 03. 01. 2023, 13:50:56 »

ale chapes ze toto je len klam? ze si bohaty len na paperi, kedze to nie je tvoje ale mas to zauverovane? to je ten najvacsi klam co tu kazdy ide, ze ma bavo a haciendy ale na splatky ti ludia maju hole rite inak. Ty ale rovnako pocitas s tym ze do konca zivota sa ti nic nestane, vsetko bude tuti fruti ako teraz a budes mat nonstop len lepsi a lepsi prijem. Staci ked sa ti to "neposklada" dobre a nezostane ti nic.

toto je ale velmi solidní blábol. Řada lidí ma na účtě (či v něčem podobném, např. akcie, zlato apod) dost peněz na to, aby si leccos mohli pořídit.

ale v době, kdy jsou peníze levné (což teda není nyní, ale byl to případ posledních deseti let minimálně) není důvod, proč si nepůjčit, a půjčku umořit z průběžného přijmu - a na úspory nesahat.

a dvojnásob či trojnásob toto platí o dlouhodobých a skutečných věcech , jako třeba vlastní bydlení.

v tom klamu žiješ ty.

V klame ziju vsetci ktori ziju v tomto ponzi fiat svete kde idu peniaze cez inflaciu do neba kde su uplne vsetci zadlzeni a myslia si ze su bohati. Ti vsetci su 100 krat viac mimo ako ja.

Ak mam cisty prijem 100k euro rocne tak nechapem preco by som si nemohol dovolit kupit za par sto tisic byt a mat za 3 roky hotovo a nebyt v strese.

Ako som povedal, mna to nezaujima ze si mozem s niecim priebezne financovat dlh. Preco by som to robil? Len preto, lebo to je mozne? Takto len vsetci zivite tento kapitalisticky system ktori ludi ozobracuje a zotrocuje na cely zivot.

Tak len zivte tu pyramidu. Ja si veci budem kupovat za hotove co najviac sa to bude dat.