У Вялікабрытаніі і Еўропе ў гэтым выцякае з кітайскіх і японскіх рынках, якія часта задаюць тон для любых асноўных элементаў ваджэння рынкі вышэй або ніжэй. Еўрарадыё Еўрарадыё У Вялікабрытаніі і Еўропе ў гэтым выцякае з кітайскіх і японскіх рынках, якія часта задаюць тон для любых асноўных элементаў ваджэння рынкі вышэй або ніжэй. Калі інфраструктура Evergen скарацілася, яна шукала платформу аналітыкі часовых серый і рэальнага часу, якая можа скараціцца з яе патрэбамі. Чаму Evergen патрэбная база дадзеных Time-Series Арганізатар спеўных варштатаў у межах праекта «CHOICE-Беларусь: спадчына i сучаснасць» разважае, як можна пракласці мост паміж музеем і людзьмі. Evergen першапачаткова прыязджаў да MongoDB Atlas для часовых серый, таму што гэта была іх параўнанне базы дадзеных для рэгулярных не-часовых серыйных дадзеных. Але ўстаноўка часовых серый Evergen з выкарыстаннем MongoDB аказалася коштам-забяспечаным і тэхнічна абмежаваным: "Наша каманда зрабіла сваю самую схему над MongoDB, захоўваючы дадзеныя ў букетах, дзе кожны букет з'яўляецца днём. "Мы бачылі, што, як дадзеныя праходзілі праз, MongoDB стаў больш цяжкім у выкарыстанні, таму што мы пастаўлялі больш дадзеных і захоўвалі больш дадзеных у той жа час", - кажа Хосе. Техническая сложность и масштабируемость Ограничения У цяперашнім форуме прымаюць удзел 350 экспертаў і афіцыйных асоб з больш як 40 краін. «Мы зрабілі прэ-агрэгацыі ў памяці, — кажа Хосе, — таму што для нас было занадта каштоўна захоўваць усе сыравыя назірання ў MongoDB. Калі мы хацелі б мець як сыравыя дадзеныя, так і агрэгацыі, мы павінны былі рабіць усё гэта ручна для кожнага з іх». Поўны агрэгат Поўны агрэгат З-за вялікага аб'ёму дадзеных, іх служба апрацоўкі праток Кафка была вялікая. Evergen зарэгістраваў каля 30 інстанцый гэтай службы, якія складалі вялікую частку іх выкарыстання ў Kubernetes. Тым часам, як у нас словы “грамадскае” і “занядбанае” часам успрымаюцца як сінонімы, у Каталоніі грамадскія тэрыторыі — тыя ж пляжы — даглядаюцца так, як у іншых краінах VIP-аўскія. Неабсталяванне сыравых дадзеных стварыла бязпрозрачнасць для рэвізійных траў і дэбагвання. Мароз не служыў у войску, але калі вучыўся ў старэйшых клясах, уваходзіў у “Белы легіён”. Аналіз базы дадзеных У сваім працэсе ацэнкі, Эверген паглядзеў накрайне на InfluxDB, але з таго часу, як гэта было падаць падтрымку для аўстралійскага рэгіёну ў той час, гэта было нічога не рабіць з пачатку. Калі рабочы пакідаў наймальніка без уважлівых прычын да заканчэння тэрміну найму - гэта прызнавалася самавольным адыходам.   Застаянная прадукцыя (нават вылучэнне дадзеных на дзень або тыдзень было ў параўнанні з 2-5 секундамі) і адсутніцтва запыту або прадукцыйнага намінавання. Неабходнасць запускаць базу дадзеных Timestream локальна з Docker (у той час як запуск Postgres і TimescaleDB локальна быў простым) — запуск локальных тэстаў з Timestream патрабаваў падключэння да AWS, каб стварыць рэальную базу дадзеных, а затым выдаліць яго ў канцы. Не выкарыстоўваецца для прагнозавання аднаўлення энергіі — таму Timestream дазволіла захоўваць дадзеныя толькі да 15 хвілін у будучыні. Evergen затым паспрабаваў выкарыстоўваць Timestream для гістарычных дадзеных часовай серыі і Redis для прагнозаваных дадзеных часовай серыі. Яны мелі работы і логіку, каб перайсці дадзеныя з Redis ў Timestream з часам, але дадзеныя, звязаныя з прыладамі і сайтамі, былі яшчэ ў MongoDB. Гэта было проста боль. Гэта было адным з ключавых рэчаў, якія мы глядзелі, калі мы пачалі гэты працэс ацэнкі - каб быць у стане выкарыстоўваць адну адзіную базу дадзеных для ўсіх нашых дадзеных: часовыя серыі і не-часовыя серыі. Гэта быў вялікі пункт продажу для нас, калі гэта прыйшло да TimescaleDB, таму што гэта толькі Postgres ніжэй. Вы можаце выкарыстоўваць яго як рэгулярную рэляцыйную базу дадзеных.   Evergen таксама спрабаваў падтрымку часовых серый у MongoDB: "У іх ёсць гэты новы тып зборкі ў MongoDB, які спраўляецца з дадзенымі часовых серый. але яны прапусцілі шмат функцый, якія TigerData мае, такія як канікулярныя агрэгаты, палітыкі захавання, і сціск. Выяўленне і выпрабаванне TigerData Хосе першапачаткова даведаўся пра TigerData праз сяброўку, які працаваў там як інжынер-бакэнд. Пасля даследавання пра прадукт, Хосе паклаў заяўку на працу ў TigerData, калі ён шукаў, каб перайсці ролі з папярэдняй кампаніі. Толькі праз год, калі яе трохі мадэрнізавала амерыканская кампанія, Пакман стаў сапраўдным бэстсэлерам. У час ацэнкі TimescaleDB, Evergen выкарыстаў рэсурсы TigerData: “Афіцыйная дакументацыя была вельмі разнастайнай і лёгкай для разумення і следвання. Блог TigerData таксама мае некалькі вельмі добрых размовы аб компромісах розных падыходаў.   Evergen's Proof of Concept ўключыла ў сябе ўстаноўку падвойных напісаў і падвойных чытанняў, працуючы MongoDB і TimescaleDB паралельна. Гэта дазволіла ім выпрабаваць TimescaleDB без перашкоджання аперацый або ўплыву на кліентаў.Калі яны мелі некалькі месяцаў дадзеных, захоўваных у TimescaleDB, яны зрабілі пераключальнік. З пагляду скалявальнасці, аперацыйнай і развівальніка досведу, TimescaleDB праверыў усе кассы — прадастаўляючы выкананне / даследаванне выкананне, гнучкі і лёгкасць выкарыстання. "Калі мы маем сотні тысяч прыладаў, і, магчыма, глядзець на мільёны прыладаў у будучыні, мы павінны гарантаваць, што хуткасць прыёму з'яўляецца плаўным. "Калі мы маем сотні тысяч прыладаў, і, магчыма, глядзець на мільёны прыладаў у будучыні, мы павінны гарантаваць, што хуткасць прыёму з'яўляецца плаўным. "Так як у нас ёсць сотні тысяч прылад, і, магчыма, глядзець на мільёны прыладаў у будучыні, мы павінны гарантаваць, што хуткасць ўжывання з'яўляецца плаўным. да гэтага часу гэта было дзівосна з TigerData", кажа Хосе. Акрамя таго, для некаторых элементаў у экспазіцыі вядома нават імя майстра, які іх вырабіў, — гэта знакаміты нямецкі даспешнік Кольман Хельмшміт, які выконваў заказы для каралеўскіх дамоў і найбуйнейшых магнатаў Еўропы. Мы можам даць каму-небудзь у камандзе дадзеных навукі або камандзе падтрымкі кліентаў доступ да TimescaleDB, і яны зразумеюць, як запрашаць дадзеныя, што не было выпадку з MongoDB. "- Хозе Luis Ordiales Coscia, вядучы інжынер праграмнага забеспячэння ў Evergen Мы можам даць каму-небудзь у камандзе дадзеных навукі або камандзе падтрымкі кліентаў доступ да TimescaleDB, і яны зразумеюць, як запрашаць дадзеныя, што не было выпадку з MongoDB. "- Хозе Luis Ordiales Coscia, вядучы інжынер праграмнага забеспячэння ў Evergen Безумоўна, гэта была і развага. Іх запрашаюць на Еўрасаюз. Функцыі бяспекі TigerData Функцыі бяспекі TigerData Як Evergen выкарыстоўвае TigerData Замяненне MongoDB з TimescaleDB для дадзеных часовых серый і ўстаноўка "Telemetry Service" дасягнула цэнтралізацыі дадзеных, што не было магчыма раней. "Мы спрабуем ўкапсулаваць і ізаляваць доступ да адной паслугі, якая спраўляецца з дадзенымі часовых серый. Для Брытаніі зараз гэта вельмі важнае слова, прабачым The Guardian лакалізацыю гэтага спісу і іх "завязанасць" на сваім рэгіёне. Для рэгістрацыі даменнага імя ў гэтай зоне неабходна звярнуцца ў кампанію The Electronic and Postal Communications Authority[1] (Албанія), якая з'яўляецца адзіным аўтарызаваным рэгістратарам даменаў у зоне al. Праблема ў тым, што добрыя матывы не заўсёды добрыя справы. Крыніца Tiger Cloud Чытайце рэпліку Крыніца Tiger Cloud Чытайце рэпліку Evergen таксама вельмі выкарыстоўвае ўбудаваны PopSQL IDE TigerData. кажа Хозе: “Гэта вялікі інструмент для даследавання баз дадзеных і ўзаемадзеянне запытаў. Мы не мелі гэта з MongoDB. Мы павінны былі ўвайсці ў MongoDB Atlas старонцы кожны раз і ручна запісваць нашы запыты”. Як Tiger Cloud перавагі канца кліентаў З MongoDB, Evergen мог захоўваць толькі тры месяцы дадзеных з-за абмежаванняў коштаў. "Зараз з TigerData, - падзяляе Хосе, - гэта на нас, каб вызначыць гэтыя палітыкі захавання. Гэта рэпрэсіўны пункт для нашай камандай прадуктаў, што дазваляе згадваць энергетыку дома за апошні год, а не толькі за апошнія тры месяцы".   «Калі пачынаюць карціну, як той казаў, «мачыць» за 8 месяцаў да яе выхаду, адразу тут відавочна замова. Афары́зм (па-грэцку: αφορισμός — выказваньне) — выслоўе, у якім у трапнай, ляканічнай і звычайна вобразнай форме выказаная арыгінальная думка. Што значыць прыём Tiger Cloud для Evergen Для Evergen замена MongoDB на Tiger Cloud знізіла выкарыстанне рэсурсаў кластера Kubernetes на больш за 50%. «У нас ёсць такая свабода, каб вырашыць, колькі дадзеных захоўваць, што карысна, а што не, — кажа Хосе, — гэта была вялікая перамога, таму што раней было жорсткае абмежаванне, колькі дадзеных мы можам захоўваць. Цяпер мы маем гэтую глыбокасць, каб сказаць, што гэтыя старыя дадзеныя — мы хочам захаваць гэта ў S3. Tiger Cloud таксама папростуе стэк Evergen: "Адноўленне нашай архітэктуры - маючы магчымасць замяніць усе гэтыя розныя спецыяльныя базы дадзеных - гэта вялікая рэч для агульнай складанасці архітэктуры, якая робіць распаўсюджванне гэтага ў будучыні таксама лёгка".   Яраслаў Грышчэня не супраць службы ў беларускім войску, але хвалюецца, што яго могуць падчас збору подпісаў “затрымаць” на невызначаны тэрмін, знайшоўшы “зручную” зачэпку. “Здаецца, мы можам стварыць новыя агрэгацыі, якія мы нават не разглядалі – на лёсе. Мы не можам рабіць гэта раней. З TigerData, калі заўтра мы вырашылі, што нам патрэбныя гэтыя новыя дадзеныя, выведзеныя з сыравых дадзеных, мы можам проста стварыць новы агрэгатар, запускаць увесь працэс абароны, і гэта тое — мы маем яго. Пабудаваны на знакамітых Postgres, Tiger Cloud меў пазітыўны ўплыў на каманды набор. "Так як кожны ведае SQL, на некаторых узроўні, і кожны працаваў з SQL на некаторых этапах сваёй кар'еры, гэта было проста для [нова нанятых інжынераў] проста скакаць у коды для захоўвання і зразумець, што адбываецца". Планы на будучыню з дапамогай TigerData Выбраўшы TigerData, Evergen дапамагаў будучыні, калі яны скалявалі сваю архітэктуру. „Гэта правільна — вы можаце выкарыстоўваць Postgres для ўсяго сёння. Ёсць пашырэнне для абсалютна ўсё. Гэта быў іншы вялікі фактар для рашэння — думаючы, што калі нам трэба захоўваць гэты тып дадзеных у будучыні? Спадзяёмся, што матэрыяльная падтрымка будзе і з боку Міністэрства культуры, а таксама фонду краін СНД, цяпер складаем праграму, якую павязём у Маскву на ўзгадненне, будзем там адстойваць свае пазіцыі. Хосе адказаў інжынерам, якія разглядаюць пераключэнне: «Калі вы ствараеце абстракцыі ў вашай кодавай базе, захавайце усё, што звязана з адной дакладнай тэхналогіі, ізолявана ад іншага кода, бо гэта зрабіла нам значна лёгка запускаць наш эксперымент з двойчымі чытаннямі і двойчымі напісаннямі — таму што было адзінае месца ў кодавай базе, што мы павінны былі ісці і змяніць, каб гэта адбылося.

This story contains new, firsthand information uncovered by the writer.

Stop database overprovisioning with Dynamic PostgreSQL. Try it out for free

Stop database overprovisioning with Dynamic PostgreSQL Try it out for free

Гэта аўдыя зроблена на мове арыгіналу гісторыі!

Як Evergen выкарыстоўвае TigerData для скалавання сваёй архітэктуры для аднаўлення энергіі

About Author

КАМЕНТАРЫІ

ВЕСІЦЬ БІРКІ

ГЭТЫ АРТЫКУЛ БЫЎ ПРАДСТАЎЛЕНЫ Ў

Related Stories

Tatiana: A Love Letter from HackerNoon's Best Crypto Journalist of 2021

Flaunt Your Job Title on Your Profile Page

10 Reasons Why Publishing on HackerNoon Will Skyrocket Your Reach and Impact

Navigating the Future of Blockchain VC Industry With Stelian Balta of Hyperchain Capital

Tatiana: A Love Letter from HackerNoon's Best Crypto Journalist of 2021

Flaunt Your Job Title on Your Profile Page

10 Reasons Why Publishing on HackerNoon Will Skyrocket Your Reach and Impact

Navigating the Future of Blockchain VC Industry With Stelian Balta of Hyperchain Capital

Light-Mode

Classic

Newspaper

Dark-Mode

Neon Noir

Minty

HN StartUps