- „Redshift“ yra greita ir galinga, visiškai valdoma, petabaitų masto duomenų saugyklos paslauga debesyje.
- Klientai gali naudoti „Redshift“ tik už 0,25 USD per valandą be jokių įsipareigojimų ar išankstinių išlaidų ir padidinti iki petabaito ar daugiau už 1 000 USD už terabaitą per metus.
OLAP
OLAP yra Internetinė analizės apdorojimo sistema naudojo Raudonasis poslinkis .
OLAP operacijos pavyzdys:
Tarkime, kad norime apskaičiuoti skaitmeninio radijo produkto grynąjį pelną EMEA ir Ramiojo vandenyno regionams. Tam reikia surinkti daug įrašų. Grynajam pelnui apskaičiuoti reikalingi šie įrašai:
- EMEA parduotų radijo imtuvų suma.
- Ramiajame vandenyne parduotų radijo imtuvų suma.
- Radijo vieneto kaina kiekviename regione.
- Kiekvieno radijo pardavimo kaina
- Pardavimo kaina – vieneto savikaina
Norint gauti aukščiau pateiktus įrašus, reikalingos sudėtingos užklausos. Duomenų saugyklos duomenų bazės naudoja skirtingo tipo architektūrą tiek duomenų bazės požiūriu, tiek infrastruktūros lygmeniu.
Raudonojo poslinkio konfigūracija
Raudonąjį poslinkį sudaro dviejų tipų mazgai:
Vienas mazgas: Viename mazge saugoma iki 160 GB.
Keli mazgai: Keli mazgai yra mazgas, kurį sudaro daugiau nei vienas mazgas. Jis yra dviejų tipų:
Jis valdo klientų ryšius ir gauna užklausas. Pagrindinis mazgas gauna užklausas iš kliento programų, analizuoja užklausas ir kuria vykdymo planus. Jis derinamas su lygiagrečiu šių planų vykdymu su skaičiavimo mazgu ir sujungia visų mazgų tarpinius rezultatus, o tada grąžina galutinį rezultatą į kliento programą.
Skaičiavimo mazgas vykdo vykdymo planus, o tada tarpiniai rezultatai siunčiami pirmaujančiam mazgui, kad jie būtų sujungti prieš siunčiant atgal į kliento programą. Jame gali būti iki 128 skaičiavimo mazgų.
Supraskime lyderio mazgo ir skaičiavimo mazgų sąvoką per pavyzdį.
Raudonojo poslinkio sandėlis yra skaičiavimo išteklių, žinomų kaip mazgai, rinkinys, ir šie mazgai yra suskirstyti į grupę, žinomą kaip klasteris. Kiekvienas klasteris veikia Redshift Engine, kuriame yra viena ar daugiau duomenų bazių.
Kai paleidžiate „Redshift“ egzempliorių, jis pradedamas vienu 160 GB dydžio mazgu. Kai norite augti, galite pridėti papildomų mazgų, kad galėtumėte pasinaudoti lygiagrečiu apdorojimu. Turite lyderio mazgą, kuris valdo kelis mazgus. „Leader“ mazgas tvarko kliento ryšį ir skaičiavimo mazgus. Jis saugo duomenis skaičiavimo mazguose ir atlieka užklausą.
Kodėl raudonasis poslinkis yra 10 kartų greitesnis
Raudonasis poslinkis yra 10 kartų greitesnis dėl šių priežasčių:
Užuot saugoję duomenis kaip eilučių seriją, „Amazon Redshift“ tvarko duomenis pagal stulpelius. Eilučių sistemos idealiai tinka operacijų apdorojimui, o stulpelių sistemos idealiai tinka duomenų saugojimui ir analizei, kai užklausos dažnai apima suvestinius duomenis, atliekamus per didelius duomenų rinkinius. Kadangi apdorojami tik su užklausomis susiję stulpeliai, o stulpelių duomenys saugomi laikmenoje nuosekliai, stulpeliais pagrįstoms sistemoms reikia mažiau įėjimų / išėjimų, todėl užklausos našumas pagerėja.
Stulpelių duomenų saugyklos gali būti suglaudintos daug labiau nei eilučių duomenų saugyklos, nes panašūs duomenys nuosekliai saugomi diske. „Amazon Redshift“ naudoja kelis glaudinimo būdus ir dažnai gali pasiekti didelį suspaudimą, palyginti su tradicinėmis ryšių duomenų saugyklomis.
„Amazon Redshift“ nereikalauja indeksų ar materializuotų rodinių, todėl jam reikia mažiau vietos nei tradicinėms reliacinėms duomenų bazių sistemoms. Įkeliant duomenis į tuščią lentelę, „Amazon Redshift“ automatiškai atrenka jūsų duomenis ir pasirenka tinkamiausią glaudinimo techniką.
„Amazon Redshift“ automatiškai paskirsto duomenis ir įkelia užklausą įvairiuose mazguose. „Amazon Redshift“ leidžia lengvai pridėti naujų mazgų į jūsų duomenų saugyklą, o tai leidžia mums pasiekti greitesnį užklausų našumą, kai jūsų duomenų saugykla auga.
Raudonojo poslinkio ypatybės
Raudonojo poslinkio savybės pateikiamos žemiau:
kaip išjungti kūrėjo režimą android
Raudonąjį poslinkį paprasta nustatyti ir valdyti. Vos keliais AWS konsolės paspaudimais galite įdiegti naują duomenų saugyklą, o „Redshift“ automatiškai aprūpins infrastruktūrą už jus. AWS visos administracinės užduotys yra automatizuotos, pvz., atsarginės kopijos ir replikacija, todėl reikia sutelkti dėmesį į savo duomenis, o ne į administravimą.
Redshift automatiškai sukuria atsargines duomenų kopijas į S3. Taip pat galite pakartoti S3 momentines nuotraukas kitame regione, kad atkurtumėte nelaimės atveju.
„Amazon Redshift“ yra ekonomiškiausia duomenų saugyklos paslauga, nes reikia mokėti tik už tai, ką naudojate.
Jo sąnaudos prasideda nuo 0,25 USD per valandą be įsipareigojimo ir jokių išankstinių išlaidų ir gali padidėti iki 250 USD už terabaitą per metus.
„Amazon Redshift“ yra vienintelė duomenų saugyklos paslauga, kuri siūlo kainodarą pagal pareikalavimą be išankstinių išlaidų, taip pat siūlo rezervuoto egzemplioriaus kainodarą, kuri sutaupo iki 75%, suteikiant 1–3 metų laikotarpį.
Norėdami optimizuoti raudonąjį poslinkį, galite pasirinkti vieną iš dviejų mazgų.
Tankus skaičiavimo mazgas gali sukurti didelio našumo duomenų saugyklas, naudojant greitus procesorius, daug RAM ir kietojo kūno diskus.
Jei norite sumažinti išlaidas, galite naudoti tankios saugyklos mazgą. Tai sukuria ekonomišką duomenų saugyklą, naudojant didesnį standųjį diską.
„Amazon Redshift“ automatiškai padidina arba sumažina mazgus pagal poreikį. Vos keliais paspaudimais AWS pulte arba vienu API iškvietimu galima lengvai pakeisti mazgų skaičių duomenų saugykloje.
Tai „Redshift“ funkcija, leidžianti vykdyti „Amazon S3“ duomenų eksabaitų užklausas. „Amazon S3“ yra saugūs ir ekonomiški duomenys, skirti neribotam duomenų saugojimui atviru formatu.
„Redshift“ funkcija reiškia, kad kelios užklausos gali pasiekti tuos pačius duomenis „Amazon S3“. Tai leidžia vykdyti užklausas keliuose mazguose, neatsižvelgiant į užklausos sudėtingumą ar duomenų kiekį.
„Amazon Redshift“ yra vienintelė duomenų saugykla, kuri naudojama „Amazon S3“ duomenų ežero užklausoms atlikti neįkeliant duomenų. Tai suteikia lankstumo, nes dažnai pasiekiami duomenys saugomi „Redshift“, o nestruktūrizuoti arba retai pasiekiami duomenys – „Amazon S3“.
Naudodami keletą parametrų nustatymų, galite nustatyti, kad „Redshift“ naudotų SSL duomenims apsaugoti. Taip pat galite įjungti šifravimą, visi į diską įrašyti duomenys bus užšifruoti.
„Amazon Redshift“ suteikia stulpelių duomenų saugojimą, glaudinimą ir lygiagretų apdorojimą, kad sumažintų įvesties / išvesties kiekį, reikalingą užklausoms atlikti. Tai pagerina užklausos našumą.