İctimai Bulud Repatriasiyasının İqtisadiyyatı və Niyə Ölçəkdə Xərcli Qadağandır

Son bir neçə il ərzində aydınlaşan odur ki, ictimai bulud bütün üstünlüklərinə baxmayaraq, miqyasda xərclərə qənaət etmir. Bu, məhsuldarlığı bir nöqtəyə çatdırır, lakin xərclərinizi azaltmayacaq. İctimai buludda yaxşılıq var, çünki o, həm əməliyyatlarda, həm də iqtisadiyyatda səmərəliliyi təmin edən inanılmaz dərəcədə güclü dəyər təklifi - dərhal, biznesin tələb etdiyi miqyasda mövcud olan infrastruktur təklif edir. Bulud həmçinin innovasiyaları inkişaf etdirməyə kömək edir, çünki şirkət resursları yeni məhsullara və böyüməyə diqqət yetirmək üçün boşaldılır. Bununla belə, məlumatlarınızla sadəcə qarşılıqlı əlaqə aktı, açıq şəkildə yırtıcı olduğu nümayiş etdirilən çıxış xərcləri yaradır. Bu, xüsusilə tətbiqlər və iş yükləri davamlı, ardıcıl və məlumat tələb edən (yüksək həcm/sürət/ oxumaq və yazma zənglərinin müxtəlifliyi) və ya yüksək performanslı analitikləri əhatə etdikdə doğrudur - onlar böyüdükcə ictimai buludda davamlı deyil.

“..bulud ilə sənaye təcrübəsi yetişdikcə – və biz bir şirkətin iqtisadiyyatında buludun həyat dövrünün daha dolğun mənzərəsini görürük – aydın olur ki, bulud şirkətin səyahətinin əvvəlində verdiyi vədi açıq şəkildə yerinə yetirsə də, onun marjalara qoyduğu təzyiq aydın olur. şirkət miqyası böyüdükcə və böyümə yavaşladıqca faydaları üstələməyə başlaya bilər. - Sara Wang və Martin Casado, Andreessen-Horowitz, 2021

Bu, inanılmaz dərəcədə uzaqgörən olsa da, 2021-ci ilə aiddir. 2024-cü ildə məlumat artdı (bir hesaba görə ildə orta hesabla ~20% 2022-ci ildən IDC araşdırması ), iş yükləri böyüdü və miqyas problemə çevrildi. Ölçəkləmə texnologiyası deyil, konkret olaraq ictimai buludda miqyaslaşdırmanın dəyəri. David Linthicuma görə, 3 əsas səbəb var, ictimai buluddur “Bərdəyə atıldı” :

Xərc - müəyyən iş yükləri üçün onları buludda idarə etmək çox bahadır. Əmtəə avadanlıqlarının qiymətləri son bir neçə ildə indiyə qədər aşağı düşüb, bu aparat əvvəlki kimi nəhəng CapEx deyil.

Uğursuz Köçmələr - optimal şəkildə yenidən işlənməmiş və ya bulud-doğma olmaq üçün tənzimlənməmiş iş yükləri ilkin olaraq proqnozlaşdırılandan ~2,5X baha başa gəldi. Yerli səmərəsiz tətbiqlərin buludda səmərəsiz olduğu ortaya çıxdı. Onları daha səmərəli etmək çox baha başa gəlir və nəticədə buna dəyməz.

Azalan Ehtiyac - Əvvəlcə tez və səmərəli şəkildə fırlanmalı olan, həmçinin miqyaslana bilən proqramlar buludda miqyas aldı, lakin indi sadəcə təkrarlanan tapşırıqlar və məlumatların saxlanması maşınıdır. Bu proqramlar artıq buludun təmin edə biləcəyi sürətli miqyaslılıqdan faydalanmır və indi sadəcə çoxlu bahalı yaddaşdan istifadə edir. Artıq çevik, tez genişləndirilə bilən modelə ehtiyac yoxdur. Avadanlığın əmtəələşdirilməsi bu iş yüklərini idarə etmək üçün yeni, qənaətcil bir üsul təqdim etdi. Son Barclay's-a görə CIO sorğusu , bir çox CIO razılaşır.

Bundan eyni a16z məqaləsi -

“2017-ci ildə Dropbox özünün təfərrüatlarını açıqladı S-1 IPO-dan əvvəlki iki il ərzində infrastrukturun optimallaşdırılmasının əsaslı təmiri nəticəsində 75 milyon ABŞ dolları həcmində məcmu qənaət edildi ki, bunun da əksəriyyəti ictimai buluddan iş yüklərinin repatriasiyası ilə nəticələndi.

Bulud xərcləriniz gəlirinizin təxminən 50% və ya daha çoxunu tutmağa başlayanda (məsələn Asana , Datadog, Prerender.io , və başqaları), iş yüklərinizin ictimai buludda nə etdiyinə baxmağa başlamağın vaxtıdır. Təşkilati və biznes rəhbərliyi bundan xəbərdar olmalıdır ki, onlar dönə bilsinlər. Data analitika kubunu, yaddaşdaxili verilənlər bazasını və ya məlumat analitika klasterini idarə etmək kimi müəyyən iş yükləri yerli infrastruktur üçün daha uyğundur. Ancaq bunlar yalnız bir neçə nümunədir.

Bu miqyas problemindən təsirlənəcək müəyyən bir tendensiyaya diqqət yetirmək üçün gəlin AI/ML-ə və xüsusilə LLM-lərə (Böyük Dil Modelləri) baxaq. Əgər hazırkı AI təşəbbüsünüz sizə öz LLM və ya təməl modelinizi yaratmağa imkan verirsə, bunu ictimai buludda etməyin mənfi cəhətlərini nəzərdən keçirin:

1. Yüksək miqyaslı məsrəflər - LLM-ləri miqyasda öyrətmək və idarə etmək bahadır və LLM böyüdükcə ictimai bulud xərcləri də artır.

   
   

2. Nəzarətin itirilməsi - Siz həyata keçirmə, infrastruktur və performans üzərində daha az nəzarət və görmə qabiliyyətiniz var

   
   

3. Vendor Lock-in - Əgər siz LLM-ləri bir bulud platformasında öyrətmisinizsə, başqa platformaya keçid etmək çətin olacaq. Bundan əlavə, yalnız bir bulud provayderindən asılı olaraq, xüsusilə siyasət və qiymət dəyişkənliyi ilə bağlı özünəməxsus risklər var.

   
   

4. Məlumatların Məxfiliyi və Təhlükəsizliyi - Mən burada məlumatların suverenliyini də qeyd edərdim. Əsas odur ki, məlumatlarınızı dünya miqyasında yayılmış serverləri olan bir provayderə etibar edirsiniz.

   
   

Əgər müəssisəniz petabaytlarla məşğuldursa və ya bu cür miqyasda meyl edirsə, iqtisadiyyat özəl buluda üstünlük verir. Bəli, bu, daşınmaz əmlak, HW, enerji/soyutma daxil olmaqla infrastrukturun qurulması (yaxud onu Equinix kimi birindən icarəyə götürmək) deməkdir, lakin iqtisadiyyat hələ də çox əlverişlidir. İctimai bulud bulud-doğma üsulunu öyrənmək və bulud-doğma tətbiqlər portfelinə giriş əldə etmək üçün heyrətamiz yerdir, lakin bu, miqyas üçün heyrətamiz yer deyil.

İqtisadiyyatdan bir nümunə

Yaxşı, iqtisadiyyat nədir? İllüstrasiya üçün, davamlı və ardıcıl analitik iş yükləri üçün Apache Spark və Dremio-nu idarə etmək üçün Kubernetes-dən istifadə edən 10PB müasir datalake götürək. Bu tip iş yükləri təhlil, yeniləmə və yeniləmə və təqdimat üçün obyekt yaddaşından məlumatların tez-tez oxunmasını və yazılmasını tələb edir. Xərc strukturu nöqteyi-nəzərindən biz əsas xərc amilləri üçün bəzi fərziyyələrdən istifadə edəcəyik:

• Əgər datadan istifadə edə bilmiriksə, bu məlumat gölləri və iş yüklərinin məhdud faydası var. Məlumatlar anlayışlar təmin edir, digər tətbiqlərə xidmət edir və yaddaş mühitindən kənarda emal edilməli ola bilər. Bu, məlumatların yaddaşdan köçürülməsini tələb edir. Ayda 500 TB-a daxil olunduğunu fərz etsək, bu, ayda əldə edilən məlumatların yalnız 5%-ni təşkil edir.

  
  

• Məlumat/Obyekt Sorğuları üçün (PUT, GET, HEAD və s.) biz ayda 10b-dən çox obyekt sorğusunu görən oxşar ardıcıl və davamlı iş yükünün müştəriləri ilə işləmişik. Beləliklə, bu növ iş yükü üçün mühafizəkar bir fərziyyə kimi 10b-dən istifadə edə bilərik.

  
  

• Eynilə, həmin müştərilər həmin obyektlər üçün təxminən eyni sayda şifrələmə sorğusunu görürlər, buna görə də nümunəmiz üçün mühafizəkar fərziyyə kimi yenidən 10b-dən istifadə edirlər.

  
  

Bu fərziyyələrlə ictimai buludun dəyəri belə görünə bilər:

10PB üçün İllik İctimai Bulud Xərcləri = 7,3 milyon dollar və ya GB/ay üçün 0,061 dollar

Yuxarıdakı fərziyyələr belədir və çox olması faktı sizə xüsusi istifadə və iş yükü faktorlarından asılı olaraq xərclərin nə qədər dəyişkən ola biləcəyini göstərir. Bu, büdcə tərtib etməkdə ciddi çətinliklər yaradır. Bundan əlavə, heç bir səviyyəli və ya hər hansı bir Data Lifecycle fəaliyyətinə malik olmamaq da bir qədər nadirdir, çünki təşkilatlar məlumat daha az “aktiv” olarsa, adətən məlumatları daha soyuq səviyyələrə köçürür. Lakin bütün bunlar sadəcə olaraq maya dəyərini artırır, çünki müxtəlif səviyyələrin GB/ay üçün fərqli qiymətləri, eləcə də obyektlərin həmin səviyyələrə avtomatik köçürülməsi üçün xərclər var.

MiniIO ictimai buludda istifadə edilən eyni texnologiyalardan istifadə edərək şəxsi buludda (colo və ya məlumat mərkəzi) miqyasını genişləndirməyə imkan verir: S3 API uyğun obyekt yaddaşı, sıx hesablama, yüksək sürətli şəbəkə, Kubernetes, konteynerlər və mikroservislər. Əsas fərqlərdən biri odur ki , obyekt sorğuları (GETs, PUTs və s.) üçün heç bir xərc yoxdur və infrastruktur onu dəstəklədiyi müddətcə sorğuların sayında heç bir məhdudiyyət yoxdur. Bundan əlavə, şifrələmə MiniIO Enterprise və Community versiyalarına daxildir və tələb olunan şifrələnmiş obyektlərin sayına heç bir məhdudiyyət qoyulmur.

Bu seçimlik əməliyyat xərcləri, çeviklik və nəzarətin ideal qarışığını təklif edir. Düzdür, siz hardware üçün CAPEX götürəcəksiniz, lakin kiçik işə başlamaq və əsas bulud dərslərindən (elastiklik, komponent üzrə miqyaslama, hesablamanın yaddaşdan ayrılması) faydalanmaqla müəssisələr ilkin məsrəfləri minimuma endirə və əməliyyat qənaətini maksimum dərəcədə artıra bilər.

Əmtəə avadanlığı ilə birləşdirildikdə və kolo və ya xüsusi məlumat mərkəzində işlədikdə, MiniIO ictimai bulud xərclərini (həmçinin həmin bulud xərclərinin idarə edilməsi ilə bağlı xərcləri) 50% - 70% və bəzi hallarda daha yüksək dərəcədə azalda bilər.

10PB üçün illik Colo/MinIO Xərcləri = ildə 1,7 milyon dollar və ya GB/ay üçün 0,014 dollar

Bu, ictimai buludla müqayisədə 10PB saxlama üçün saxlama xərclərinin ~ 77% azalmasına bərabərdir. Hətta daha kiçik saxlama tutumu ehtiyacları üçün (200TB - 2PB) qənaətləri araşdırmağa dəyər. Sənayenin ən yaxşı saxlama performansını, vedrə səviyyəsində təhlükəsizlik üçün daxili təhlükəsizlik divarını, obyektlərin saxlanması üçün xüsusi olaraq hazırlanmış müşahidə qabiliyyətini və bir çox digər əlavə dəyər xüsusiyyətləri bu, ictimai buludda sizə əlavə baha başa gələcək.

Resurs faktoru

Tez təhlil etməyə dəyər olan bir əlavə element resurslardır (insan növü). Müştərilərimizdən eşitmişik ki, ictimai bulud infrastrukturlarını idarə etmək üçün tələb olunan resursların sayı bulud infrastrukturunun ölçüsündən asılı olaraq 5-10 FTE arasında dəyişə bilər. Buraya Bulud Mühəndisləri, Bulud Komandası Rəhbərləri, DevOps Mühəndisləri və Bulud Başçıları daxildir. Əmək haqqı diapazonlarından və mediandan istifadə Şüşə qapı , bu FTE xərcləri tam yüklənmiş, ildə 700 min dollardan 1,5 milyon dollara qədər dəyişə bilər.

Müştərilərimizdən də eşidirik (onların 76%-i bu yaxınlarda keçirilmiş sorğuda) MiniIO-nun əsas dəyər amillərindən biri onun istifadəsi asanlığı və idarə oluna bilməsidir. Eyni sorğu göstərdi ki, onların 60%-i MiniIO-nun Təkmilləşdirilmiş Əməliyyat Effektivliyi təqdim etmək qabiliyyətinə istinad edib.

"MiniIO... bizim üçün dəstək və texniki xidmət xərclərini azaldıb."

• Peşəkar Xidmətlər Şirkəti

"Məhsul kimi MiniIO çox yaxşı saxlama həllidir, o [var].... resursların dəyərini 50%-dən çox azaldır."

• Sondan sona DevOps təkliflərində ixtisaslaşmış aparıcı texnologiya həlləri təminatçısı

Daxili olaraq biz MinIO-dan çoxlu müxtəlif iş yükləri, saxlama ehtiyacları, sınaq və s. üçün istifadə edirik və hesablamalarımıza görə, MiniIO PB+ infrastrukturları üçün 1 FTE - 3 FTE tərəfindən idarə oluna bilər. Bu, minimum resurslarla miqyasda böyük infrastruktur yaratmağa imkan verir.

Başlanır

İndi iqtisadiyyatın özəl bulud üçün necə və nə üçün işlədiyini gördüyünüz üçün əminəm ki, bu yola başlamaq üçün hansı addımların atılacağı ilə maraqlanırsınız. Bu barədə həmkarlarım yazıblar burada və burada , və mən sizin Bulud komandalarınıza və DevOps komandalarınıza ictimai buluddan uzaqlaşma ilə bağlı təfərrüatlar üçün bu bloqlara baxmağı təklif edirəm.

Biz onlarla müştərimizin əmtəə avadanlığından və ya öz məlumat mərkəzlərindən və ya kolo-dan istifadə edərək öz məlumatlarını repatriasiya etdiyini və MiniIO-nun yüksək məhsuldar, sadə obyekt saxlama həllindən bəzi real qənaət və faydalar əldə etdiyini gördük.

Yuxarıdakı təhlilin nümayiş etdirdiyi kimi, bizneslər verilənləri verilənlər mərkəzində və ya kolokasiya xidmətində öz aparatlarına repatriasiya etməklə mövcud nəzərdə tutulan illik ictimai bulud S3 hesablarının 50%-dən çox əhəmiyyətli xərclərə qənaət edə bilərlər. Yuxarıdakı ssenaridə yalnız 10PB ilə biznesiniz növbəti beş il ərzində təxminən 6,5 milyon dollar qənaət edə bilər.

Məsələnin həqiqəti ondan ibarətdir ki, ictimai bulud miqyasda xərci qadağan edir. İctimai buludun mahiyyətcə elastik təbiəti miqyaslaşdırmanı cəlbedici edir, lakin iqtisadi baxımdan demək olar ki, həmişə səhv seçimdir. Bu, xüsusilə ictimai buludda xərclərin və nəzarətin itirilməsinin əhəmiyyətli ola biləcəyi AI/ML kimi məlumat tutumlu vəzifələr üçün doğrudur. Məlumat miqyası artdıqca, MiniIO ilə özəl bulud həlləri iqtisadi cəhətdən üstün olur və aşağı qiymətlərlə ekvivalent (bəlkə də daha yaxşı) texnologiyalar təklif edir. Əmtəə avadanlığından və özəl bulud infrastrukturundan istifadə etməklə şirkətlər ictimai buludla müqayisədə əhəmiyyətli xərclərə qənaət və performans faydaları əldə edə bilər, bəzən 70%-ə qədər. İş yükləriniz üçün ictimai buluddan uzaq miqrasiyanı araşdırmağı və kritik biznes proqramlarınızı modernləşdirmək və miqyasını artırmaq üçün MiniIO-dan istifadə etməyi təklif edirik.

Daha çox öyrənmək və öz modellərinizi idarə etmək üçün dəyər mühəndisliyi funksiyamızdan yararlanmaq istəyirsinizsə, lütfən bizimlə əlaqə saxlayın. [email protected] və söhbətə başlaya bilərik.