Big Data qay darajada katta?

Big Data texnologiyalari va ularni boshqarish

Big Data qay darajada katta?

Zamonaviy munozaralarda Big Data terabayt buyurtmalarida hajm ma'lumotlari sifatida tavsiflanadi. Amalda (gigabayt yoki terabayt haqida gap ketganda) bunday ma'lumotlarni "an'anaviy" ma'lumotlar bazalari va standart apparat (ma'lumotlar serveri) yordamida saqlash va boshqarish oson. Dasturiy ta'minot statistika Ma'lumotlarga kirish (o'qish) algoritmlari, bashoratli (va golli) modellarni o'zgartirish va qurish uchun ko'p tishli texnologiyadan foydalanadi, shuning uchun bunday ma'lumotlar namunalari osongina tahlil qilinishi mumkin va maxsus vositalarni talab qilmaydi. StatSoftning ba'zi bir hozirgi loyihalarida, 9-12 million qatorli buyurtma namunalari qayta ishlanadi. Biz ularni xavfli yoki bashoratli modellarni yaratish uchun ma'lumotlar omborida to'plangan va tashkillashtirilgan 1000 parametrga (o'zgaruvchiga) ko'paytiramiz. Ushbu turdagi fayl "faqat" 100 gigabayt hajmga ega bo'ladi. Bu, albatta, kichik ma'lumot ombori emas, lekin uning hajmi standart ma'lumotlar bazasi texnologiyasining imkoniyatlaridan oshmaydi. Amalda, bu tezkor qarorlarni qabul qilishga imkon beradigan analitik modellarning etarli tezligi (masalan, kredit xavfi to'g'risidagi prognozlar, firibgarlik ehtimoli, uskuna tugunlarining ishonchliligi va boshqalar) deyarli har doim standart vositalardan foydalanib erishish mumkinligini anglatadi.