 veri yoğun iş yükleri için tasarlanmış bulutta yerel bir veritabanıdır. ANSI SQL'i destekleyen, dağıtılmış, ilişkisel bir SQL veritabanı yönetim sistemidir ve  veri alımı, işlem işleme ve sorgu işlemedeki hızı nedeniyle. SingleStore ilişkisel, JSON, grafik ve zaman serisi verilerini depolayarak HTAP gibi karma iş yüklerine ve hem OLTP hem de OLAP kullanım senaryolarına hizmet edebilir. SQL sorgularını makine kodunda derler ve şirket içi kurulumlar, genel/özel bulutlar ve Kubernetes operatörü aracılığıyla konteynerler dahil olmak üzere çeşitli ortamlara dağıtılabilir. Tek Mağaza   tanınan  Modern Datalake Mimarisi  İçinde  SingleStore, İşleme Katmanına tam olarak sığar. Bu katman, dönüşümler için motorların işlendiği, diğer araçlar için verilerin sunulduğu, veri araştırmasının ve diğer kullanım durumlarının yaşandığı yerdir. SingleStore gibi işleme katmanı araçları diğerleriyle iyi çalışır: genellikle birden fazla işleme katmanı aracı aynı veri gölünden yararlanır. Genellikle bu tasarım, takım uzmanlığı durumunda uygulanır. Örneğin, hibrit vektör ve tam metin arama özelliğine sahip SingleStore gibi süper hızlı bellek içi veri işleme platformları, yapay zeka iş yükleri için optimize edilmiştir.  üretken yapay zeka kullanım durumları için.   Modern Datalake mimarisi   özellikle  Önkoşullar  Bu öğreticiyi tamamlamak için bazı yazılımların kurulumunu yapmanız gerekir. İhtiyacınız olan şeylerin bir dökümü aşağıda verilmiştir:    Bu güçlü araç, uygulamaları konteyner adı verilen standartlaştırılmış yazılım birimlerinde paketlemenize ve çalıştırmanıza olanak tanır.   Docker Motoru :    Bu, bir orkestratör görevi görerek çok kapsayıcılı uygulamaların yönetimini basitleştirir. Karmaşık uygulamaların kolaylıkla tanımlanmasına ve çalıştırılmasına yardımcı olur.   Docker Oluşturma :    Yeni başlıyorsanız,  yükleyici, hem Docker'ı hem de Docker Compose'u kendi platformunuza (Windows, macOS veya Linux) yüklemek için tek noktadan kullanışlı bir çözüm sağlar. Bu genellikle bunları tek tek indirip yüklemekten daha kolay olur. Kurulum:   Docker Masaüstü  Docker Desktop'ı veya Docker ile Docker Compose kombinasyonunu yükledikten sonra, terminalinizde aşağıdaki komutu çalıştırarak bunların varlığını doğrulayabilirsiniz:   docker-compose --version  Ayrıca alabileceğiniz bir SingleStore lisansına da ihtiyacınız olacak.  .    Burada  Hem lisans anahtarınızı hem de root şifrenizi not edin. Hesabınıza rastgele bir root şifresi atanacaktır ancak SingleStore kullanıcı arayüzünü kullanarak root şifrenizi değiştirebileceksiniz.  Başlarken  Bu eğitim şunlara bağlıdır:  . Repoyu istediğiniz bir konuma kopyalayın.   bu depo  Bu depodaki en önemli dosya, SingleStore veritabanına (   ), bir MinIO örneğine (   ) ve MinIO hizmetine bağlı bir   konteynerine sahip bir Docker ortamını tanımlayan   dosyasıdır. singlestore minio mc docker-compose.yaml  Mc kapsayıcısı, ilk önce MinIO'nun erişilebilir olmasını bekleyen, MinIO'yu ana bilgisayar olarak ekleyen,   paketini oluşturan, kitap verilerini içeren bir   dosyasını yükleyen, paket politikasını herkese açık olarak ayarlayan ve ardından çıkan bir   dosyası içerir. classic-books books.txt entrypoint  version: '3.7' services: singlestore: image: 'singlestore/cluster-in-a-box' ports: - "3306:3306" - "8080:8080" environment: LICENSE_KEY: "" ROOT_PASSWORD: "" START_AFTER_INIT: 'Y' minio: image: minio/minio:latest ports: - "9000:9000" - "9001:9001" volumes: - data1-1:/data1 - data1-2:/data2 environment: MINIO_ROOT_USER: minioadmin MINIO_ROOT_PASSWORD: minioadmin command: ["server", "/data1", "/data2", "--console-address", ":9001"] mc: image: minio/mc:latest depends_on: - minio entrypoint: > /bin/sh -c " until (/usr/bin/mc config host add --quiet --api s3v4 local http://minio:9000 minioadmin minioadmin) do echo '...waiting...' && sleep 1; done; echo 'Title,Author,Year' > books.txt; echo 'The Catcher in the Rye,JD Salinger,1945' >> books.txt; echo 'Pride and Prejudice,Jane Austen,1813' >> books.txt; echo 'Of Mice and Men,John Steinbeck,1937' >> books.txt; echo 'Frankenstein,Mary Shelley,1818' >> books.txt; /usr/bin/mc cp books.txt local/classic-books/books.txt; /usr/bin/mc policy set public local/classic-books; exit 0; " volumes: data1-1: data1-2:  Bir belge düzenleyici kullanarak yer tutucuları lisans anahtarınız ve kök parolanızla değiştirin.  Bir terminal penceresinde repoyu kopyaladığınız yere gidin ve tüm kapsayıcıları başlatmak için aşağıdaki komutu çalıştırın:   docker-compose up  Bir tarayıcı penceresi açın, şuraya gidin  ve 'root' kullanıcı adı ve root şifrenizle giriş yapın.    http://localhost:8080/  MinIO'yu kontrol edin  Şu yöne rotayı ayarla  MinIO WebUI'yi başlatmak için.   için Kullanıcı Adı ve Şifre ile giriş yapın. Mc konteynerinin   adında bir kova yaptığını ve kovanın içinde bir nesnenin olduğunu göreceksiniz.    http://127.0.0.1:9001 minioadmin:minioadmin classic-books  SQL ile keşfedin  SingleStore'da SQL Düzenleyiciye gidin ve aşağıdakileri çalıştırın  :   komutlar   -- Create a new database named 'books' CREATE DATABASE books; -- Switch to the 'books' database USE books; -- Create a table named 'classic_books' to store information about classic books CREATE TABLE classic_books ( title VARCHAR(255), author VARCHAR(255), date VARCHAR(255) ); -- Define a pipeline named 'minio' to load data from an S3 bucket called 'classic-books' -- The pipeline loads data into the 'classic_books' table CREATE PIPELINE IF NOT EXISTS minio AS LOAD DATA S3 'classic-books' CONFIG '{"region": "us-east-1", "endpoint_url":"http://minio:9000/"}' CREDENTIALS '{"aws_access_key_id": "minioadmin", "aws_secret_access_key": "minioadmin"}' INTO TABLE classic_books FIELDS TERMINATED BY ','; -- Start the 'minio' pipeline to initiate data loading START PIPELINE minio; -- Retrieve and display all records from the 'classic_books' table SELECT * FROM classic_books; -- Drop the 'minio' pipeline to stop data loading DROP PIPELINE minio; -- Drop the 'classic_books' table to remove it from the database DROP TABLE classic_books; -- Drop the 'books' database to remove it entirely DROP DATABASE books;  Bu SQL betiği, klasik kitaplarla ilgili verileri işlemek için bir dizi eylem başlatır.   adında yeni bir veritabanı oluşturarak başlar. Bu veritabanı içerisinde başlık, yazar, yayın tarihi gibi detayları tutacak şekilde tasarlanmış   adlı bir tablo oluşturulur. books classic_books  Bunu takiben,   etiketli bir S3 klasöründen veri çıkarmak ve bunu   tablosuna yüklemek için   adlı bir işlem hattı kurulur. Bölge, uç nokta URL'si ve kimlik doğrulama kimlik bilgileri dahil olmak üzere bu işlem hattına yönelik yapılandırma parametreleri tanımlanır. classic-books classic_books minio  Daha sonra, veri alma ve doldurma sürecini başlatmak için 'minio' boru hattı etkinleştirilir. Veriler tabloya başarıyla yüklendikten sonra, bir SELECT sorgusu   saklanan tüm kayıtları alır ve görüntüler. classic_books  Veri çıkarma ve görüntülemenin tamamlanmasının ardından   hattı durdurulur ve kaldırılır,   tablosu   veritabanından çıkarılır ve   veritabanının kendisi de kaldırılarak temiz bir sayfa sağlanır ve veri yönetimi işlemleri tamamlanır. Bu komut dosyası, SingleStore'daki MinIO'daki verilerle oynamaya başlamanızı sağlamalıdır.  minio classic_books books books  Bu Yığın üzerinde derleme yapın  Bu eğitim, nesne depolamada verilerin depolanması, işlenmesi ve sorgulanmasıyla denemelere olanak tanıyan sağlam bir veri yığınını hızlı bir şekilde oluşturur. Hızı ve çok yönlülüğüyle bilinen bulut tabanlı bir veritabanı olan SingleStore'un MinIO ile entegrasyonu, modern datalake yığınında önemli bir tuğla oluşturur.  Sektör trendi depolama ve bilişimin ayrıştırılmasına doğru yönelirken, bu kurulum geliştiricilere yenilikçi veri yönetimi stratejilerini keşfetme gücü veriyor. İster veri yoğun uygulamalar oluşturmak, ister gelişmiş analizler uygulamak veya yapay zeka iş yükleriyle denemeler yapmak istiyor olun, bu eğitim bir başlangıç noktası görevi görür.  Sizi bu veri yığınını temel almaya, farklı veri kümeleri ve yapılandırmalarla denemeler yapmaya ve veri odaklı uygulamalarınızın tüm potansiyelini açığa çıkarmaya davet ediyoruz. Sorularınız veya fikirleriniz için hello@min.io adresinden bize ulaşmaktan veya bize katılmaktan çekinmeyin.  .   Gevşek Kanal

The code in this story is for educational purposes. The readers are solely responsible for whatever they build with it.

Walkthroughs, tutorials, guides, and tips. This story will teach you how to do something new or how to do something better.

Developers do. Download MinIO and see for yourself. 

MinIO

Bu ses hikayenin orijinal dilinde üretilmiştir!

Çok uzun; Okumak

Get Free Unlimited IP Geo Data With IPinfo Lite

Yeni Nesil Veri Çözümlerinin Geliştirilmesi: SingleStore, MinIO ve Modern Datalake Stack

About Author

YORUMLAR

ETİKETLERİ ASIN

BU YAZI

Related Stories

Görünmeyen Katmanlar: Kullanıcı Görüşmeleri Neden Yeri doldurulamaz bir Varlıktır?

Telegram: Kripto Adası'nın anakaraya olan köprüsü

Forumlardan Feed'lere: Sosyal Medya Algoritmaları Dijital Etkileşimi Nasıl Şekillendiriyor

Floki'den Valhalla Hindistan'ın Sri Lanka Turuna Yardımcı Sponsor Olarak Katıldı

Görünmeyen Katmanlar: Kullanıcı Görüşmeleri Neden Yeri doldurulamaz bir Varlıktır?

Telegram: Kripto Adası'nın anakaraya olan köprüsü

Forumlardan Feed'lere: Sosyal Medya Algoritmaları Dijital Etkileşimi Nasıl Şekillendiriyor

Floki'den Valhalla Hindistan'ın Sri Lanka Turuna Yardımcı Sponsor Olarak Katıldı

Light-Mode

Classic

Newspaper

Dark-Mode

Neon Noir

Minty

HN StartUps