"Led Bank"da kart və depozit programları üçün məlumatları toplayan, işləyən və birləşdirən infrastrukturu yaradırıq ki, düzgünlük, auditoriyalılıq və uyğunluq yükümlülüklərini dəstəkləyək. Konkret banklar, kartlar, procesorlar və fintech programları ilə əlaqə saxlamaq üçün bir çox tərəfdən fərqlənir, bu iş prosesinin bir çox parçası vardır və bir-birindən fərqlənmə maliyyələşmə və uyğunluq riski artırır. Bu yazı multi-party birləşmə üçün qurduğumuz AWS serverless arhitekturunu, ilk tanış etdiyimiz iki prodüksiyanın butonluqlarını (fail işləmə limitləri və Amazon DynamoDB yazma hot spots) və bunları azaldmaq üçün istifadə etdiyimiz şablonları izah edir. I. Konteksti və ölçüdə uzlaşma üçün teknik qadağanlar Banking-as-a-Service (BaaS) kart programlarında, fintechlər tipik olaraq bir Bank Identification Number (BIN) sponsoru, FDIC-ə təhrif olunan kart ağıllı lisenziyasını sahib olan və hesablanma və program təhrifindən sorğu-sual olan bir emitent bankı vasitəsilə işləyir. Bir kart satın alması, tipik olaraq ISO 8583 mesajında gedən bir autorizasiya istehlakı ilə başlayır, bu, kartların ağları üzərində satın alanlar və emitentlər arasında dəyişən real-time kart-transaksiya mesajları üçün bir standartdır. Hesab edirəm ki, bir neçə gündən sonra banklar bütün bankların paytaxtında işləyəcəklər. Real-time authorization və batch settlement arasındakı bu ayrılıq, birinciliyində, file-driven və operasional olaraq kritik olan bir səbəblidir. Konkret olaraq, bu sistemlər özündə çox tərəfdardır və bir-birindən çox adımdır.Çünki bu sistemlər identifikatörlər, zamanlama və düzəltmə semantikasında fərqlidirlər, konkret olaraq multi-party və multi-stepdir. VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. Praktikda, rahatlıq dörd yeniləşən iş prosesinə bölünür, hər biri ayrı-ayrı teknik kəskinliklər içərisindədir: 
 
 
 
 
 Bilancını yaradan transaksiyaları kontrol edin. Bankın müştəriləri ilə bağlı bilansiyaların toplamının bankın omnibus For-Benefit-Of (FBO) bilansiyasına eşitdiyini göstərir. Xatırladaq ki, partiyaların sayı, format dəyişdirilməsi və eşidilməyən identifikatörlər və ya vaxtlandırılmasından ötrü, hesablanan kart aktivliyi ağıllı və ya prosesor hesablanma dosyalarına qarşılaşır. Kimlik, kart statusu və hesab autorizasiyası referensiyaları validləşdirmək, əgər sabit və ya mübahisə olsaydı, finansal matçı ifadə edə bilər. VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq çox adi bir hala çevrilib. 
 
 
 
 
 Fillər gecikmiş, düzəldilməz, duplicated, və ya düzəldilmiş olur, bu yüzden pipeline yenə çalışmaq üçün mümkün və təhlükəsiz olmalıdır. Identifikatorlar düzgün birləşdirilməzdir: bir və ya bir-birindən fərqli ID-lər paylaşıla bilər, bu nedenle matçlar sıklıkla kompozit anahtarlar və korrelasiya logikasına ehtiyacı olur. Adjustment-heavy settlement semantikası: qaytarmalar, mübahisələr, xərclər və düzəldicilər zamanla qarşılıqlı normaları dəyişir və yazma amplifikasiyasını artırır. İkinci, uzun sürətli fail işləməsi, kısa sürətli hesablanma limitlərini keçə bilər və yüksək yazma hacmi, birləşmə veritabanında eşidilməz qasım modelləri və sıcak bölünürləri yaratır. Bu postda, finansal təhvilin teknik problemlərini, konkret olaraq balans kontrollərini və ağ təhvilinin qarşılanmasını, və bu kəskinliklərlə bağlı AWS-in serverless pipeline-i necə dizayn etdik. II. Serverless Architecture: Decoupling və orkestrasiya Bu limitləri göz önündə tutduğumuz halda, operasiyanı minimumlaşdırmaq, xərclənməyi maksimumlaşdırmaq və avtomatik ölçekləndirmeyi dəstəkləmək üçün serverless-first arhitektura qoşulduq.Bu qələbə bizim kiçik komandamızın sürətlə iterasiya etməsinə və kompleks finansal iş logikasına, infrastruktur karbantrasiyası və düzəltməsindən başqa inžinirlik çabalarımızı fokuslaşdırmasına imkan verir, bu da bizim geliştiricilərimiz və infrastruktur xərcləri profilimizi çox azaldır. və Yazının basitliyi və fokuslaşdırılması üçün, biz yalnız maliyyələşmələr üzərində işləyəcəyik. Amazon Simple Storage Service (Amazon S3), Amazon EventBridge, Amazon Simple Queue Service (Amazon SQS), Amazon DynamoDB, AWS Lambda, Amazon Elastic Container Service (Amazon ECS), AWS Step Functions A. Ingestion və Event Routing (Amazon S3 və Amazon EventBridge) Bu proses Transaction, Balance və ya Network Settlement (Transaction, Balance və ya Network Settlement) dosyalarının biri S3 buckets ilə sinkronizasiya edilən Safe File Transfer Protocol (SFTP) folderına atıldıqdan başlayır. Bizim dizaynımızda, biz doğrudan S3 xəbərləri istifadə etmədən EventBridge vasitəsilə S3 objekti yaratmış hadisələri yönəltdik. Amazon SQS (Sustainable Processing Queue) ilə bağlı Konkret təyyarə sisteminin yaradılması üçün “SQS Standard” standartı var və bu standart üç əsas funksiyaya malikdir: 
 
 
 
 Əgər üç böyük dosya bir-birinə gəlsə, sırası yükü absorbuyacaq, aşağıdaki kompüter xidmətlərimizin mesajları düzgün, davamlı həcmdə çəkməyi təmin etməsinə kömək edər. SQS-də mesajlar uğurla işlənməyincə, ən azından bir dəfə göndərilməsini garantiya edir. Dead Letter Queue (DLQ): Hər bir SQS sırası bir DLQ ilə konfigürə edilir.Əgər bir işləmə Lambda bir neçə dəfə başarısız olursa (t.b. 5 olan maksimum retry sayını aşarsa), mesaj manuel inspektorluq üçün DLQ-yə gedir, belə ki, heç bir transakssiya sessiz olaraq kaybolmaz. C. Compute Layer (AWS Lambda və Amazon ECS) Bizim kompüter infrastrukturumuz maliyyələşdirmək üçün strateji olaraq bölünür: 
 
 
 VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. D. Workflow Orchestration (AWS Step Functions) - İş prosesləri orkestrasiyası "AWS Step Functions" (AWS Step Functions) serverless orkestration (serversiz orkestrasiya) üçün fərqli hesablanma adımlarını koordinə etmək üçün yaxşı bir yerdir.Biz Step Functions (Step Functions) seçdik, çünki bu, maliyyələşdirmə üçün müzakirə edilə bilməyən dayanıklılıq və fəlakət toleransını təmin edir, bizə kompleks retry və status yönetimi kodunu yazmaq lazım olmadan. Bu seçimin səbəbləri arxeoloji ehtiyacı ilə bağlıdır: 
 
 
 
 VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. “Massive Parallelism via Map State” – “Map State” vasitəsi ilə böyük paralelizm: “Map State” və “Map State” vasitəsi ilə eyni işi başqa bir girişlə iterasiya etmək istədikdə, “Map State” vasitəsi ilə müəyyən işlərə paralel olaraq gedirdik. Visual Debugging and Auditability: Compliance and operations üçün, bütün iş prosesini vizuallaşdırma imkanı qiymətsizdir.Step Functions hər bir adımın grafik görünüşünü, onun girişlərini, çıxartmalarını və başarısızlığın səbəblərini daxildir. E. İstirahət Layer (Amazon DynamoDB) “DynamoDB”i böyük bir kart programı üçün vacib olan xüsusiyyətləri ilə dəyişə bilmədikləri transaksiyalar və balans rekordlarını saxlamaq üçün bazamız kimi seçdik: 
 
 
 
 High Volume, Low Latency: DynamoDB, finansal iş prosesləri üçün ehtiyacı olan, yüksək volyumda öngörülən, tək-çifli millisecond latency üçün dizayn edilmişdir. Serverless and Managed: Tamamilə idarə olunan xüsusiyyətini istifadə edərək, biz bir traditional relational database (MySQL/Postgres) provisioning, patching, and sharding problemini ortadan kaldırdıq, bu da bizə partition key dizaynı kimi application-level problemlərə tamamilə fokus verməyə imkan verir. Streams Integration: DynamoDB Streams çox vacibdir, aşağılıq uyğunluğu, analitik və data warehousing (Snowflake) sistemlərini tetikleyen yaxın real-time dəyişikliklər təmin edir. Bizim kredit kartlarımız bu cür görünürdü. VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. Sağ tərəfdə, FBO təchizatı var, bu, ağ, fintech və bank rekordlarında son-on-end doğruluğu dəstəkləmək üçün FBO hesabında düzəldilmiş dəyəri ilə fintech balans dosyasını təchiz edir. “The Scaling Battle: Overcoming Serverless Limits” (Serversiz limitləri aşmaq) Bu arkitektura başlanğıcda yaxşı işlədi, lakin volumimiz artdıqca, iki kritiki dəhşətə çatdıq: hesabat sürəti və bazaların bölünməsi, bu da bizi metodumuza dəyişdirmək üçün zorladı. A. Kompüterin optimizasiyası: Lambda-to-ECS migrasiya "Lambda"nın 15 dəqiqə sürət limiti faydalı olsa da, geniş sütunlu, sabit genişlikli dosyada 20000 rekord olan böyük parçalar arasında kompleks birləşdirmə logikası da zaman zaman bu pencerəyə çatdı. Bizim həllimiz yeni dizayn deyildi, ancaq basit bir arkitektonik dəyişdirmək idi: 
 
 
 
 Birləşmiş Codebase: Biz bir-birini birləşdirmək üçün işləyirdik, bu da Go-da yazılmış bir konteynerləşdirilmiş uygulama idi, bu da dosya analizi və işləməyi işləyirdi. Dynamic Execution: Biz bu konteyner görüntüyi Lambda (sürətli, efemeral sürətçilik üçün) və ECS Fargate (uzun sürətli, memoriya-intensiv işlər üçün) üçün yerləşdirdik. VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. Bu mövzu bizə praktik bir balans verdi: daha kiçik dosyaların 90%-i üçün Lambda'nın maliyyələşdiricisi və sürəti, böyük, yavaş-yavaşlıqlı transaksiyaların və bilança dosyalarının 10%-i üçün Fargate'in hesabatlı kafedrası. B. High-Throughput Writes üçün DynamoDB hakimiyyəti VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. Xatırladaq ki, bir neçə ildir ki, bir neçə ildir ki, bir neçə ildir ki, bir neçə ildir ki, bir neçə ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir ki, bir ildir. Biz bir partition key ProgramID#FileDate vardı (yani, PROGX#20250101) Bu dizayn başarısızdı, çünki bir gündə böyük bir program üçün bütün transaksiyaları hit Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Qazaxıstanda Konkret bir prosesdə hər hansı bir prosesdə iştirak etmək Aynı bölüşmə VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. Mövzuya görə, partiyaların anahtarı: Bizim ən böyük müştərilərimiz üçün yazma shardingini təqdim etmək idi: 
 
 
 
 PPP: Biz partition key-ə hesablanan bir shard numarasını daxil etdik: ProgramID#FileDate#ShardN. Biz TransactionID-də qısa bir hashing algoritması (t.b. modulo) istifadə etdik ki, onu qısa bir qısaqlığa qoymuşuq (t.b. TransactionID % 10 0 və 9 arasında qısa bir qısaq sayında işarə edir). Sonuç: Bu, 10 fiziki bölünmə yerine yazma yükünü genişləndirir, Hot partition problemini dərhal azaldır və bizə 10 dəfə daha yüksək həcmdə verilər. 4.Müsahibələr öyrənilməlidir Bu bölmədə öz barışmazlıq borularınızda istifadə edə biləcəyiniz modelləri, implementasiyalarımızdan istifadə etdiyimiz nümunələrlə təsvir edirik. A. Sistemin dizaynı Burada üç sistem dizayn dəsti var ki, düzgün işləmək, imperfekt girişlər və çoxlu ekstern sistemlər üçün bir uzlaşma borusu qurduğunuzda istifadə edə bilərsiniz: 
 
 
 
 
 
 
 Make retries safe by default (idempotency is the baseline): In an event-driven pipeline, retries are expected, so you should design each step to be safely repeatable. For our use case, we had to pass an idempotency key (for example, a TransactionID or MessageID) through the workflow and use it to guard every side-effecting operation. In practice, that means: 
 
 
 
 Workflow steps: each state transition is protected with conditional writes (for example, in DynamoDB) so the same message cannot advance or mutate state twice. Core banking transactions: postings, transfers, and ledger-affecting actions are executed with explicit dedupe semantics (same idempotency key → same outcome), so a retry results in a no-op or a deterministic “already processed” response rather than a duplicate movement of funds. Webhooks and outbound notifications: These are delivered at least once, so each message includes a stable, recipient-facing idempotency key (event ID) and we maintain an internal delivery ledger (attempts, acknowledgements, and final state). Recipients can safely dedupe replays, and our retries won’t trigger duplicate downstream actions. 
 
 Always Use a Dead Letter Queue (DLQ):   and a redrive policy so that malformed messages are quarantined instead of endlessly retrying and clogging the queue. Configure a SQS DLQ 
 
 Do not let a service be the only source of truth for its own correctness.: Reconciliation is cross-system by definition, so build checks that validate invariants from the outside. For example, comparing transactions sent by the program against the network and their FBO was very important. SQS DLQ-nin qurulması Operational Excellence kursları Bu operasional leksionlar, vərdişləri görünür, işləyə biləcək və komandanın və ortaqlarınız üçün araşdırılmasını asanlaşdıraraq, tespit etmək və düzəltmək üçün vaxtı azaldır. 
 
 
 
 
 Əsas səhifə » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Gündəm » Xatırladaq ki, bir neçə ildir ki, bu problemlər həll olunmayıb, bir neçə ildir ki, bir neçə ildir ki, bu problemlər həll olunmalıdır. VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. Xatırladaq ki, bir neçə ildir ki, bu problemlər həll olunmasa da, bu problemlər həll olunmasa da, bu problemlər həll olunmasa da, bu problemlər həll olunmasa da, bu problemlər həll olunmalıdır. C. Interface Design: File vs. API İş prosesi üçün daha yaxşı bir API olduğunda, yayılan bir yanlışlıq file-based interfaces üçün varsayılan idi. 
 
 
 Burada doğru cavab yoxdur; problemin çözülməsi üçün doğru abstraksiyanın nə olduğunu düşünmək lazımdır. Biz dosyaları yalnız günün sonundakı snapshotın ehtiyacı olduğu fakt batch operasiyalar üçün istifadə etdik (t.b. Network Settlement). Daha sonra hər şey üçün APIs-i istifadə etdik, özellikle real-time feedback və ya kiçik, ayırdlı məlumat transferləri lazım olduğu yerlərdə. Basit bir API çağırmasından daha kompleks olduğu üçün bir neçə iç interfeisin dosyalara dayandırılmış yükləməsindən HTTP API-lərə yenidən yazılması lazım idi. VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu. Sonrakı VVD - Hollandiyada futbolçu bu adla tanımır, orada VVD daha çox mərkəz-sağı təmsilən edən siyasi partiyanın adının qısaltması kimi bilinir - artıq sorğu-suala ehtiyacı olmayan ulduzdu.

This story contains new, firsthand information uncovered by the writer.

Read My Stories

Bu audio hekayənin orijinal dilində hazırlanmışdır!

“Serverless Architecture” ilə müqayisədə müqayisədə

About Author

ŞƏRHLƏR

ETİKET ASIN

BU MƏQALƏ TƏQDİM EDİLMİŞDİR

Related Stories

Women in Tech: Azize Sultan Shares Her Inspiring Journey from Architecture to Tech Leadership

Optimizing Operations for Real Estate Investors - Interview with Startups of the Year Nominee, Azibo

How Azarus's Technology is Transforming Viewer Engagement on Stream

Women in Tech: Azize Sultan Shares Her Inspiring Journey from Architecture to Tech Leadership

Optimizing Operations for Real Estate Investors - Interview with Startups of the Year Nominee, Azibo

How Azarus's Technology is Transforming Viewer Engagement on Stream

Light-Mode

Classic

Newspaper

Minty

Dark-Mode

Neon Noir

Minty

HN StartUps