Silicon Valley-ko Pied Piper orain benetakoa da Konpresio Teknologia Berriari esker

HBOren Silicon Valley komedia-serieak kritikaren ospea eta puntuazio ia perfektua jaso zuen Rotten Tomatoes-en.

Komedia handi gehienek bezala, ikuskizunaren arrakasta ziurrenik 2014-2019 bitartean Bay Area teknologikoko eszena teknologikoko elementu bitxienetako batzuei buruzko ikuspegi satirikoa eskaintzeko gaitasunari esker izango da.

Kasu honetan, Pied Piper -en sortzailea eta bere taldea bere konpresio-teknologia berria mundura zabaltzeko eginkizuna dute, non masetara eskala daitekeen.

Seriea ekoizten zenean, konpresio-teknologia hau ez zen istorioak kontatzeko gailu burutsu bat baino askoz gehiago, startup txatarra honek bere irtenbide aitzindariarekin zer nitxo aurkitu zuen erakusteko balio zuena.

Hala ere, 2024. urtera arte aurreratzen badugu, GenAI teknologiaren gorakada eta datu-eskari aurrekaririk gabe, ez da inoiz Silicon Valley-ren sortzaileek proposatutakoaren antzeko irtenbide baten premiazko beharrik izan.

Hala eta guztiz ere, badirudi enpresa batek lortu duela antzeko konpresio eredu harrigarri bat sortzea, gaur egun jokoan dauden datu-bolumen handiak hautsi nahi dituena.

Silicon Valley ulertzeko, ikusi Silicon Valley

Seriean, Pied Piper zure datuetarako berehalako sarbidea eskaintzen duen konpresio abiarazte bat da.

Eta artea imitatzen duen bizitzaren adibide bakarretik urrun dago. Izan ere, datuak konprimitzeko tresnaren kontzeptua ez da Pied Piper-en elementu bakarra errealitatera gurutzatu zena.

Izan ere, ikuskizunaren ikerketarako irakasleei kontsultatu zitzaien, Weissman Score serierako garatutako konpresio-metria berri bat izanik. Hala eta guztiz ere, horrek ez die mundu errealeko ikerlariei benetan erabiltzea eragotzi.

Bitartean, Vinith Misra, IBMren Watson Taldeko ikertzaileak ikuskizunerako kontsultatu zuena, konpresio algoritmoaren fikziozko hobekuntza eskaintzen zuen artikulu tekniko bat idaztera iritsi zen.

Hala ere, ikuskizunerako aurkeztutako konpresio-algoritmoa fikzioa zen arren, GPU sorta berri indartsu batek eta prozesatzeko txip aurreratuek esan nahi dute hurrengo maila datuak prozesatzeko gaitasunak aukeraren barruan daudela.

Pied Piperren ametsa errealitatera eramatea

Enpresa batzuk datuen konpresiorako "benetako Pied Piper" titulua irabazteko gertuago dauden arren, New Yorkeko startup batek arreta handia jasotzen ari da azkenaldian espezialitate honetan aurrera egiteko.

SQream Blue, datuen azelerazio plataformaren datu-lakuaren irtenbideak, duela gutxi herrialdeko milia bat gainditu zuen merkatuan antzeko soluzioak.

Abiadurari eta kostuari dagokionez, SQream Blue eta bere teknologia patentatutako konpresio-soluzioa 3 aldiz azkarrago eta Databricks-en kostuaren erdia egin zuten probaren konparazio-elementuan.

Hau zehatzago esateko, SQream Blue-ren exekuzio-denbora osoa 2462,6 segundokoa izan da, eta datuak muturreraino prozesatzeko kostu osoa $ 26,94 izan da. Databricks-en exekuzio-denbora osoa 8332,4 segundokoa izan zen, 76,94 $-ko kostuarekin, SQream Blue-k datu handien analisirako kostu-errendimendu abantaila esanguratsu bat adierazten duena.

Emaitza hauek lortzeko, SQream-ek Amazon Web Services-en (AWS) erreferentea egin zuen 30.000 eskala-faktorearekin, eta horrek 30 TB inguruko datu-multzo bat sortzen du, SQream-en gaitasun erlatiboak eskalan probatzeko. Sortutako datu guztiak Apache Parquet fitxategi gisa gorde ziren Amazon Simple Storage Service-n (Amazon S3), eta kontsultak datu-base batean aurrez kargatu gabe prozesatu ziren.

Iragarpenaren arabera, SQream Blue-ren abiadura paregabea AEBetako Kongresuko Liburutegian katalogatutako liburu guztiak ordubete baino gutxiagoan irakurtzearen parekoa zen, eta gero denak 25 dolar baino gutxiagoren truke erostea, Pied Piper-ek Weissman-en egindako emaitza nabarmenak gogorarazteko. TechCrunch Disrupt -en Silicon Valleyko atal gaiztoan proba.

2024an, irabazi mota hauek ezin dira nahikoa azkar etorri.

Gure datuen mendekotasunari aurre egitea

Gavin Belson-ek, multimilionarioak eta Silicon Valley-ko antagonista nagusia, gai honi buruz diskurtso adierazgarria eman zuen: "Datuen sorrera lehertzen ari da. Jendeak hodeian ezabatzeari uko egiten dion selfie eta alferrikako fitxategi guztiekin, munduko datuen ehuneko 92 azken bi urteetan bakarrik sortu da. Egungo erritmoan, munduko datuak biltegiratzeko ahalmena hurrengo udaberrirako gaindituko da. Hondamendia baino ez da izango».

«Datu eskasia, datuen errazionamendua, datuen merkatu beltzak. Norbaiten konpresioak mundua salbatuko du datu-gedonetik, eta ziur asko hobe da Nucleus izatea eta ez Pied Piper madarikatua!

Baina hau ez da soilik selfie-ak eta edukiak. Hodei publikoek gaur egun enpresen lan-karga guztien erdia baino gehiago hartzen dute eta negozio batzuek urtero 12 milioi dolar baino gehiago gastatzen dituzte espazio horretan.

Honek negoziorako datu kritiko ugari adierazten du, egungo metodoak erabiliz kudeatzeko jasangaitza izateko puntuan dagoena. Horregatik, benetako munduak Pied Piper bat behar du.