|
Big Data bilan ishlash texnologiyalar va tendensiyalar
|
| bet | 13/77 | | Sana | 31.05.2024 | | Hajmi | 6,73 Mb. | | #258613 |
Bog'liq Kitob. 1 3.3. Big Data bilan ishlash texnologiyalar va tendensiyalar
Dastlab, SUBD NoSQL MapReduce algoritmlari va Hadoop loyihasi vositalari kabi noma’lum tuzilgan ma’lumotlarga ommaviy ravishda parallel ravishda ishlov berish usullari va texnologiyalari kiritilgan. Keyinchalik, boshqa echimlar katta ma’lumot texnologiyalariga taalluqli bo‘lib, ular katta-katta ma’lumotlar massivlarini, shuningdek ba’zi bir uskunalarni qayta ishlash qobiliyatlarida o‘xshash xususiyatlarni taqdim etishdi.
MapReduce - Google tomonidan taqdim etilgan kompyuter klasterlarida taqsimlangan parallel hisoblash modeli. Ushbu modelga ko‘ra dastur klaster tugunlarida bajariladigan juda ko‘p o‘xshash elementar vazifalarga bo‘linadi va keyinchalik tabiiy ravishda yakuniy natijaga tushiriladi.
• NoSQL (ingliz tilidan Not Only SQL) - har xil nomutanosib ma’lumotlar bazalari va omborxonalar uchun umumiy atama biron bir aniq texnologiya yoki mahsulotni anglatmaydi. An’anaviy relyatsion ma’lumotlar bazalari juda tez va bir xil bo‘lgan so‘rovlar uchun juda mos keladi va katta ma’lumotlarga xos bo‘lgan murakkab va moslashuvchan qurilgan so‘rovlarda yuk o‘rtacha chegaralardan oshib ketadi va ma’lumotlar bazasidan foydalanish samarasiz bo‘ladi.
• Hadoop - bepul tarqatiladigan yordamchi vositalar to‘plami, kutubxonalar va yuzlab va minglab tugunlar klasterlarida ishlaydigan tarqatilgan dasturlarni ishlab chiqish va boshqarish. U katta ma’lumotlarning asosiy texnologiyalaridan biri hisoblanadi.
• R - statistik ma’lumotlarni va grafikalarni qayta ishlash uchun dasturlash tili. U ma’lumotlarni tahlil qilish uchun keng qo‘llaniladi va aslida statistik dasturlar uchun standart bo‘lib qoldi.
• Uskuna echimlari. Teradata, EMC va boshqa korporatsiyalar katta ma’lumotlarni qayta ishlash uchun mo‘ljallangan apparat va dasturiy ta’minotni taklif etadi. Ushbu tizimlar serverlar va ommaviy parallel ishlov berish uchun boshqarish dasturlarini o‘z ichiga olgan o‘rnatishga tayyor telekommunikatsiya shkaflari sifatida etkazib beriladi. Bunga ba’zan tasodifiy kirish xotirasida analitik ishlov berish uchun apparat echimlari, xususan, SAP va Oracle Analytics-dan Hana dasturiy ta’minoti va dasturiy ta’minotlari kiradi, garchi bunday qayta ishlash dastlab katta darajada parallel bo‘lmasa ham va bitta tugunning xotira hajmi cheklangan bir necha terabayt
McKinsey konsalting kompaniyasi aksariyat tahlilchilar tomonidan ko‘rib chiqilgan NoSQL, MapReduce, Hadoop, R texnologiyalariga qo‘shimcha ravishda, katta ma’lumotlarga ishlov berish sharoitida SQL qo‘llab-quvvatlaydigan Business Intelligence texnologiyalari va ma’lumotlar bazasini boshqarish tizimlarini ham o‘z ichiga oladi.
3.3.1-rasm. Katta ma’lumotlar texnologiyasi
|
| |
