VPS pre CDN

Viete o lacnej ponuke VPS vhodnom na CDN? Cize neobmedzena prevadzka, aspon 1Gbit a TBajty miesta.Zatial som nasiel contaboo ktore ma object storage, problem ale je ze tam je 250 qps a 10Mbit limit, co je mi na nic. Hetzner ma zase SX-Line Za 100€/mes s 4x16TB(cize povedzme 32TB v RAIDe). Co je fajn ako centralne ulozisko, ale na jednotlive nody je to strasne drahe. Netreba mi moc cpu ani ram, len to miesto a siet. To sa mi moc zatial nedari najst. A kedze ide o CDN tak hladam poskytovatela co ma datove centra po celom svete(primarne zapadna amerika a europa samozrejme).

Mám pocit, že si trochu pletete jak to funguje. Stačí jakákoliv S3, dejme tomu třeba Digitalocean Spaces, 5$/250gb a 1TiB transfer. A napojit to na Cloudflare CDN, kde nastavíte cache level a edge cache ttl (tuším max je měsíc). Kdykoliv když cache hitne, tak nejde request na S3, díky tomu nepotřebujete neomezený transfer. A S3 chcete minimálně z toho důvodu, že zpravidla bývá levnější a snadno se škáluje. Plus pomocí AWS S3 klienta (seženete na jakýkoliv jazyk, framework i open source typu Wordpress) snadno můžete soubory nahrávat.

Jak píše Mikuláš, mít object storage jako přímý backend pro CDN je cesta k milionovým účtům a vteřinovým latencím, tj. přesně opak proč se CDN buduje.Opět, jaký rozpočet a kolik požadavků?Tam, kde není neomezený rozpočet rád používám bunny.net, má storage i CDN za poměrně slušné peníze. Pokud si z většiny hostingů uděláš CDN a budeš jim vytěžovat 1Gb/s linky, poměrně rychle tě utnou, teda kromě těch, kteří ti to napočítají do faktury. Vyhrazená linka stojí tisíce na region měsíčně, nemyslím si, ale že se dostaneš do takových čísel, že to budeš muset řešit.Ještě stojí za pozornost třeba vultr.com. Je také otázka, jestli neděláš zbytečnou optimalizaci dopředu.

Ja som bral object storage ako najlacnejsiu moznu formu uloziska dat, lebo block storage casto stoji sialene peniaze. Mne stacia na CDN rotacne disky, prezijem bez drahsich ssd. Ale ked sa to na toto nehodi tak pohoda. Skratka len hladam najlacnejsie riesenie.Hetzner ma este Storage Box, 20TB za 50€, co by sa mozno dalo napojit k niektoremu ich cloudovemu vps ale to sa moc neoplati v porovnani s tym ES-Line.O bunny viem, ale ja potrebujem riesit sukromnu CDN vo vlastnej rezii pretoze budem riesit velke subory(video), co bezne CDN nedavaju pokial sa to nerozkuskuje na mensie casti(hls/dash), ale primarne tam pojde o prisnu kontrolu pristupu, co sa proste neda riesit na externej cdn.Mne tych 100€ za ES line nevadi. Akurat by som nerad rozhadzoval peniaze hned zo zaciatku ked budu naroky znacne mensie, nez sa projekt rozbehne.Inak vultr je sialene drahy, to mozem ist do google cloudu uz rovno a pekne im tam podpisat novu hypoteku za sluzby...

doslova ano, OS na uložení je velice levný, drahé jsou dotazy, při hodně iops se vyplatí dělat cache na lokálních discích či na remote block storage.jednotky TB zase nejsou tolik, abys to postavil na vps, kde se iops na disk neřeší (teda kromě aws/azure, že). Privátní CDN (nebo aspoň s jwt) je trochu jiná věc. Tady ti doporučím nedělám předčasnou optimalizaci a postavit to na VPS a řešit multi tier storage layet (neznám správný český termín), tj. co se ti vejde na lokální disky, měj tam, co ne, postupně dávej na OS. To jen tak střílím od boku.

Jasne, ved to je plan. Mne prave ide o tie cdn nody. Totiz centralny server kam sa data budu nahravat moze stat co chce, mne ale ide prave o tie male nody ktore to budu vsetko kesovat a ktore tu cdn ako taku budu tvorit. Preto hladam lacne masiny.Pripadne ak mate niekto napad ako pouzit beznu cdn(bunny/cloudflare..) ale s tym ze sa da riadit kontrola pristupu(idealne ak by sa cdn dopytovala na "access" server pre kazdy dopyt), pripadne by sa do url na subor doplnil jwt a cdn ho vedela validovat.--Tak sa zda ze bunny to podporuje https://docs.bunny.net/docs/cdn-token-authentication

To by asi šlo, vůbec jsem netušil, že to bunny umí, nikdy jsem to nepotřeboval.Tak pak existuje nabídka malých bare metal serverů s lokálními disky, tohle třeba nabízí evropský scaleway, https://console.online.net/en/order/server (1TB disk za 15 EUR není zlé na storage), v USA nebo v Asii pak najdeš podobné. Můžeš jich mít více a nejspíš ti v počátku poskytnou dostatek výkonu a až vyrosteš, můžeš jít do velkého cloudu, kde se malé projekty prostě nevyplatí.

Hej to je fajn, nie je to sice vela ale ak tam nastavim pravidla na agresivne mazanie dlhsie nenavstivenych suborov tak by to mohlo stacit. Len zase ten hetzner mi da 2x2TB za 45€ ale scaleway za 62+DPH este.PS: ono este jedna vec je ze ja uchovavam vsetky data v zasifrovanej forme a odsifruvam ich az ked su vyziadane, "on-the-fly". Takze na CDN ako je bunny by museli byt odsifrovane. Co zase nie je koniec sveta ked k nim mozem riadit pristup ale je to skratka faktor. Anyway, VPS s par TB miestom sa v kazdom pripade hodi a verim ze niekto to na trhu musi ponukat za nejake normalne ceny, ked sa da zohnat high-cpu a high-memory, tak musi ist aj high-storage bez obmedzeneho egresu.

Ty scaleway servery s 1TB diskem a atom cpu mají AES-NI a dávají pro aes-128-cbc rychlost dešifrování asi 300MB/s, openssl mám kompilovaný s flagy -Wall -O3 -O2 na RHEL 8. Reálně se tedy můež dostat na 70MB/s pro čtení šifrovaných dat a posílání v HTTPS spojení. To je nic moc. Pokud bych již měl dělat něco takového, tak nepoužiji obyč disk, ale nahodím něco jako ceph cluster s s3 gateway a udělám tomu jen reverzní proxy a oddělím storage pro lokalitu a frontend server.Máš-li měsíčně spodní desítky tisíc na provoz, tak se toho moc nedá vymyslet a raději slevit z požadavků (šifrování) a vzít hotovou službu, do toho se ti nevejde ani admin, který to bude hlídat, máš-li měsíčně alespoň 200k na provoz, tak to už je spodní hranice, kdybych byl schopný ti na tom postavit spolehlivou infrastrukturu a zajistit nonstop dozor.Když si to naopak budeš řešit sám, tak zvol variantu, které rozumíš a jsi schopný jí sám spravovat, tj. vyhni se ideálně všem zbytečným optimalizacím dopředu a jdi rychle na trh. Jen požadavek na šifrování ti zdvojnásobí náklady na servery a přidělá spousty práce, bezpečnost tím stejně nezvedneš, pak totiž záhy zjistíš, že ten klíč musíš mít na serveru na stejném disku, takže kdokoliv se tam dostane, bude mít data přístupná. Po chvilce pátrání najdeš služby typu KMS, tam hned zjistíš, že to je pekelně drahé a že to má opět výkonový dopad na provoz.V CZ jsem dělal infrastrukturu pro jeden projekt na reklamy, cca 60 TB dat, pronajali jsme servery u OVH (8 serverů, asi 30k Kč měsíčně vč. sítě a IP adres), za dalších 20k Kč se na to našla firma, která to administruje. Data se ukládají do HDFS a HBASE, šifrují se dvěma klíči (master a pak každý tenant má svůj), sdílení dat mezi tentanty probíhá kopií dat. Tenhle systém zajišťuje tak polovinu reklam na webech v ČR. Ty předpokládám, že děláš mnohem menší projekt, ale náklady míříš už daleko víš, promysli si to.

Sifrovanie mam riesenie v aplikacii. Nepotrebujem nic externe. Kluce su ulozene v pameti, konkretne mi to riesi memguard, ktory pouzivaju v Monzo banke napriklad. Jasne ze nic nie je 100% ale lepsie ako nic a o moc viac bezpecnost riesit nepotrebujem.OVH ma dobre ceny ale problem je tam s miestom. Za 60€+DPH ti daju 2Gbit bez limitu, 4 cpu, 32GB gam, 160gb nvme ssd(neviem ale ci v raide) akurat ze tusim sa da pridat len 500GB a uz neviem za aku cenu ale strasne drahe to bolo. Takze tam to zase pada proste. Ako som piusal, cpu/ram nie je problem dnes ale disky+traffic su dnes zahadne nedostupne(=drahe).