Diskord: öndürijiligi optimizasiýalaşdyrmak meselesi

“Discord” -yň öndürijiligini optimizasiýa syýahaty, häzirki zaman programma üpjünçiligi in engineeringenerçiliginde iň platforma müňlerçe ýüzlerçe million ulanyjynyň tizligini ýa-da ygtybarlylygyny pida etmän nädip giňelip biljekdigini görkezýän iň öwrediji mysallaryň biri bolup durýar. “Discord” -yň in engineeringenerçilik kararlaryny gözden geçirmek bilen - maglumatlar bazasynyň göçürilmeginden başlap, hakyky habarlaşma arhitekturasyna çenli - kärhanalar basyş astynda ýerine ýetirilýän platformalary gurmak üçin subut edilen strategiýalary çykaryp bilerler.

Haýsy esasy mehanizmler Terezide öndürijilik güýji?

Diskordyň infrastrukturasy bilgeşleýin in engineeringenerçilik söwdasy pelsepesine esaslanýar. Ilkibaşda Python we MongoDB-de gurlan platforma ulanyjy bazasynyň ýarylmagy bilen çaltlyk bilen ýüze çykdy. In engineeringenerçilik topary möhüm binagärlik karary berdi: monolit stakadan hyzmatlara gönükdirilen arhitektura tarap süýşüň, aýry-aýry komponentleriň özbaşdak ulalmagyna mümkinçilik dörediň.

“Discord” -yň işiniň özeni, “Elixir” -i we “Erlang BEAM” wirtual maşynyny hakyky wagtda habarlaşma gatlagy üçin ulanmakdyr. BEAM VM yzygiderli, ýalňyşlyga çydamly ulgamlar üçin niýetlenendir - günde milliardlarça habarlary işleýän platforma talap edýär. Bu aralykda, Diskordyň API gatlagy ahyrsoňy Rüstde gaýtadan ýazylyp, ýadyň howpsuzlygyny we Python-yň göwrüminde gabat gelmeýän nol-ýokary öndürijiligini hödürledi.

Netijede, millionlarça bir wagtyň özünde WebSocket birikmeleri, hatda iň köp ulanylanda-da 50-den gowrak habar gowşuryş wagty bilen saklanýar. Bu tötänlik däldi - bu gaýtalanýan profiliň, päsgelçilikleri kesgitlemegiň we iň güýçli ulgam bölekleriniň maksatly täzeden ýazylmagynyň önümi.

Diskord iň meşhur maglumat bazasynyň çüýşesini nädip çözdi?

“Discord” -yň iň köp dokumentleşdirilen in engineeringenerçilik kynçylyklaryndan biri, habar taryhyny saklamak üçin ulanylan paýlanan maglumatlar bazasy Kassandra degişlidir. Platforma ulaldygyça, okalan gijä galmaklyk peseldi - Kassandranyň gowy saýlanlygy sebäpli däl-de, “Discord” -yň ulanylyşynyň düýpgöter üýtgändigi sebäpli. Gyzykly bölümler, deňeşdirilmedik mukdarda okalýan maglumatlar belli bir düwünlere jemlenip, öňünden aýdyp bolmajak haýallyklara sebäp boldy.

In engineeringenerçilik toparynyň beren jogaby, C ++ bilen ýazylan Kassandra gabat gelýän maglumatlar bazasy ScyllaDB-de möhüm göçürme boldy. Migrasiýa, köp halatda p99 okamagyň gijikdirilişini 40–125 metrden bir sanly millisekunda çenli azaldy. Has möhümi, infrastruktura ýangyn söndürişine däl-de, aýratynlyk ösüşine ünsi jemlemek üçin in engineeringenerçilik çeşmelerini boşadyp, topary dolandyrmagyň amaly çylşyrymlylygyny azaltdy.

"Iň oňat öndürijilik optimizasiýasy hemişe tehniki taýdan çylşyrymly däl - ulanyjynyň agyrysyna sebäp bolýan kynçylyklary gönüden-göni çözmek bilen çylşyrymlylygy peseldýän zat." - Discord-yň maglumatlar bazasynyň göçüş hekaýasy bilen tassyklanan ýörelge.

Bu ýagdaý, ösýän platforma üçin möhüm bir sapagy görkezýär: ösüşiň bir basgançagy üçin dogry gural beýlekisi üçin nädogry gural bolup biler. Üznüksiz bahalandyrma we göçmäge taýynlyk meýilnamalaşdyrmagyň alamaty däl - in engineeringenerçilik kämillik alamatlary.

Kärhanalar haýsy hakyky durmuşa geçiriş sapaklaryny ulanyp bilerler?

Diskordyň optimizasiýa syýahaty diňe bir teoretiki däldi - islendik programma üpjünçiligi bilen baglanyşykly iş üçin ulanylýan köpeldip boljak tejribe toplumyny döretdi. Iň täsirli çäreler:

• Optimizirlemezden ozal profil: Diskord, möhüm däl ýollarda biderek tagallalaryň öňüni almak üçin çaklama däl-de, ölçeg arkaly takyk päsgelçilikleri yzygiderli kesgitledi.
• I / O agyr iş ýükleri üçin birmeňzeş dilleri saýlaň: Habar ugrukdyrmak üçin Elixir-e geçmek, her bir baglanyşyk modeli bilen deňeşdirilende CPU-nyň üstünden ep-esli azaldy.
• Hasapdan iki esse saklaň: Habar saklanyşyny hakyky gowşuryş gatlagyndan aýyrmak bilen, Discord her gatlagy belli bir ýük nusgasyna esaslanyp özbaşdak ulaltmaga mümkinçilik berdi.
• Uly partlamalaryň täzeden ýazylmagyndan artýan göçmegi kabul ediň: Kritiki ulgamlar hyzmat arkaly göçürildi, töwekgelçiligi azaldýardy we öndürijilik girdejilerini yzygiderli tassyklamaga mümkinçilik berýär.
• Gözegçilige ir maýa goýuň: Diskordyň regresleri ýüze çykarmak ukyby, paýlanan yzarlamalara, ölçeg panellerine we krizis ýüze çykmazdan ozal gurlan infrastruktura çuňňur maýa goýumlaryndan gelip çykýar.

Diskordyň çemeleşmesi, senagatyň alternatiwalary bilen nädip deňeşdirilýär?

Diskordyň optimizasiýa modeli, Slack we Microsoft Toparlary ýaly platformalaryň şuňa meňzeş kynçylyklara nähili çemeleşendigi bilen manyly tapawutlanýar. Mysal üçin, Slack, programma gatlagynda Node.js esasly stack we WebSocket dolandyryşyna ep-esli egildi we döredijiniň tanyşlygy üçin has ýokary ýady kabul etdi. Microsoft-yň Azure infrastrukturasy bilen goldanýan toparlar, çig gijikdirilişiň ýerine ýetirilişine we integrasiýa giňligine ileri tutup, kärhana ilkinji çemeleşdiler.

Diskordyň tapawutlandyryjysy, şol tehnologiýalar belli bir meselelere has laýyk gelende has az esasy tehnologiýalary - Elixir, Rüst, ScyllaDB ulanmaga taýýardy. Tehnologiýany saýlamaga ideologiki çemeleşme däl-de, bu pragmatiki lomaý platformanyň islendik wagtda gaýtadan ýazylmagyny talap etmezden ölçenip boljak girdeji getirdi.

Öz platforma bukjalaryna baha berýän kärhanalar üçin Diskordyň mysaly "dowam etdirilýän ösüşe" garşy çykýar - bu meselä laýyk däl-de, pudagyň abraýy üçin tehnologiýalary saýlaýar. Sorag hiç haçan "näme meşhur?" ýöne "bu anyk öndürijilik çäklendirmesini näme çözýär?"

Diskordyň optimizasiýa strategiýalarynyň işleýändigini haýsy empirik subutnama?

Discord-yň in engineeringenerçilik kararlarynyň netijeleri resminamalaşdyrylýar we ölçenilip bilner. ScyllaDB göçüminden soň, Discord düwün sanynyň 10x azalandygyny habar berdi, şol bir wagtyň özünde gijä galmagy gowulandyrdy. Rust API täzeden ýazmak, hyzmatlara jogap beriş wagtyny azaltmak bilen ýat bilen baglanyşykly näsazlyklaryň ähli kategoriýalaryny ýok etdi. Uly göwrümli habarlar, hatda uly oýun wakalarynda-da ulgamy ozal çäklendiren pursatlarda 50 metr çäkden yzygiderli işleýär.

2023-nji ýyla çenli “Discord” 19 milliondan gowrak işjeň serwerde her gün 4 milliard minutdan gowrak ses aragatnaşygyny gaýtadan işleýärdi. Bular biderek ölçegler däl - in engineeringener basyşy astynda kabul edilen binagärlik kararlarynyň wagtyň geçmegi bilen çydamly we çylşyrymly öndürijilik öndürijiligini subut edýär.

Freygy-ýygydan soralýan soraglar

Näme üçin Discord Python-dan Rusta API gatlagy üçin göçdi?

Python-yň Global terjimeçisi gulpy (GIL), Diskord-yň API isleginiň göwrümi ulaldygyça has kynlaşýan giriş potoloklaryny döredip, hakykatdanam birmeňzeş kod ýerine ýetirmek ukybyny düýpgöter çäklendirýär. Rust, iş wagtynyň üstünden, zibil ýygnamak arakesmesinden ýa-da Python-yň ylalaşyk çäklendirmesiz ulgam derejesindäki kod üçin deňeşdirip boljak öndürijilik hödürledi - ýük astynda has çalt we öňünden aýdyp boljak API gatlagyny öndürýär.

Ölçegde iň uly öndürijilik optimizasiýa ýalňyşlyk platformalary näme?

Iň ýaýran ýalňyşlyk, zaýalanmagyna sebäp bolýan anyk, ölçenen päsgelçiligi nyşana alman, wagtyndan öň we giňden optimizirlemekdir. Profil maglumatlary we ulanyjylara täsir ölçegleri bilen dolandyrylanda öndürijilik in engineeringenerligi has täsirli bolýar. Diskord iň ýokary täsirli çäklendirmäni - maglumatlar bazasynyň gijä galmagyny, API geçirişini, WebSocket ylalaşygyny kesgitlemek we indiki ädimine geçmezden ozal çözmek arkaly üstünlik gazandy.

Iş derejesindäki platforma, Discord-yň öndürijilik sapaklaryny kärhana in engineeringenerçilik çeşmeleri bolmazdan nädip ulanyp biler?

principlesörelgeler täsirli derejede azalýar. Islendik platforma synlaýyş gurallaryny, hakyky ýüküň aşagyndaky profil nokatlaryny amala aşyryp biler we deslapky däl-de, maglumatlara esaslanýan artýan kararlary kabul edip biler. Abstrakt infrastruktura çylşyrymlylygyny öz içine alýan ähli platformalar - keş keşbini dolandyrmak, real wagt aragatnaşygy we platforma derejesinde maglumat saklamak - ösýän kärhanalara optimal arhitekturadan peýdalanmaga mümkinçilik berýär.

“Discord” -yň öndürijiligini optimizirlemek meselesi, durnukly masştabyň problemalara serişde atmak bilen däl-de, bilgeşleýin, maglumat esasly binagärlik kararlary arkaly gazanylýandygyny subut edýär. Aragatnaşyk platformasyny ýa-da köp modully iş operasiýa ulgamyny işledýärsiňizmi, ýörelgeler birmeňzeş: yzygiderli ölçäň, akyl bilen bölüň we hakyky meselä gabat gelýän gurallary saýlaň.

Kärhanaňyz bu ýörelgeleri ulanýan platforma gözleýän bolsa - ösüşe ünsi jemläp bilersiňiz - öndürijilik, göwrümlilik we amaly çylşyrymlylyk - Mewayz-i öwreniň . 207 integral modul, 138,000+ ulanyjy we aýda bary-ýogy 19 dollardan başlamagy meýilleşdirýän Mewayz, ilkinji günden başlap işiňizi giňeltmek üçin gurulýar.