Big Data nima: xususiyatlari, tasnifi, misollar. Katta ma'lumotlar texnologiyasi (katta ma'lumotlarni tahlil qilish)
"Katta sana" atamasi bugungi kunda taniqli bo'lishi mumkin, ammo uning atrofida uning aslida nimani anglatishi haqida hali ham juda ko'p chalkashliklar mavjud. Darhaqiqat, kontseptsiya doimiy ravishda rivojlanib boradi va qayta ko'rib chiqiladi, chunki u ko'plab davom etayotgan raqamli transformatsiya to'lqinlari, jumladan sun'iy intellekt, ma'lumotlar fanlari va narsalar interneti ortidagi harakatlantiruvchi kuch bo'lib qolmoqda. Ammo Big-Data texnologiyasi nima va u bizning dunyomizni qanday o'zgartirmoqda? Keling, Big Data texnologiyasining mohiyatini va oddiy so'zlar bilan nimani anglatishini tushuntirish uchun buni tushunishga harakat qilaylik.
Big Date ning ajoyib o'sishi
Hammasi raqamli asrning boshidan beri biz yaratgan ma'lumotlar hajmining portlashi bilan boshlandi. Bu ko'p jihatdan kompyuterlar, Internet va atrofimizdagi dunyodan ma'lumotlarni "o'zlashtira oladigan" texnologiyalarning rivojlanishi bilan bog'liq. Ma'lumotlarning o'zi yangi ixtiro emas. Kompyuterlar va ma'lumotlar bazalari davridan oldin ham biz qog'oz tranzaksiya yozuvlari, mijozlar yozuvlari va ma'lumotlar bo'lgan arxiv fayllaridan foydalanganmiz. Kompyuterlar, ayniqsa elektron jadvallar va ma'lumotlar bazalari bizga ma'lumotlarni keng miqyosda saqlash va tartibga solishni osonlashtirdi. To'satdan sichqonchani bir marta bosish bilan ma'lumotlar paydo bo'ldi.
Biroq, biz asl jadvallar va ma'lumotlar bazalaridan uzoq yo'lni bosib o'tdik. Bugun, har ikki kunda, biz boshidan 2000 yilgacha olganimizdek ko'p ma'lumot yaratamiz. To'g'ri, har ikki kunda. Va biz yaratadigan ma'lumotlar miqdori tez o'sishda davom etmoqda; 2020 yilga kelib, mavjud raqamli ma'lumotlar miqdori taxminan 5 zettabaytdan 20 zettabaytgacha oshadi.
Hozirgi kunda deyarli har bir harakatimiz o'z izini qoldiradi. Biz har doim internetga kirganimizda, qidiruv moduli bilan jihozlangan smartfonlarimizni uzatganimizda, do'stlarimiz bilan ijtimoiy tarmoqlar yoki chatlar orqali gaplashganimizda va hokazo ma'lumotlarni yaratamiz. Bundan tashqari, mashina tomonidan yaratilgan ma'lumotlarning miqdori ham tez o'sib bormoqda. Ma'lumotlar bizning aqlli uy qurilmalarimiz bir-biri bilan yoki ularning uy serverlari bilan aloqa qilganda yaratiladi va tarqatiladi. Zavod va fabrikalardagi sanoat uskunalari tobora ko'proq ma'lumotlarni to'playdigan va uzatuvchi sensorlar bilan jihozlangan.
"Katta ma'lumotlar" atamasi ushbu ma'lumotlarning barchasini to'plash va ulardan keng doiradagi, shu jumladan biznesda o'z foydamiz uchun foydalanish qobiliyatini anglatadi.
Big-Data texnologiyasi qanday ishlaydi?
Big Date printsipi asosida ishlaydi: ma'lum bir mavzu yoki hodisa haqida qanchalik ko'p bilsangiz, shunchalik ishonchli yangi tushunchaga erisha olasiz va kelajakda nima bo'lishini bashorat qila olasiz. Ko'proq ma'lumotlar nuqtalarini solishtirish avval yashiringan munosabatlarni yaratadi va bu munosabatlar bizga o'rganish va yaxshiroq qarorlar qabul qilish imkonini beradi. Bu ko'pincha biz to'plashimiz mumkin bo'lgan ma'lumotlardan modellar yaratishni o'z ichiga olgan jarayon orqali amalga oshiriladi va keyin har safar ma'lumotlar nuqtalarining qiymatlarini moslashtiradigan va ular bizning natijalarimizga qanday ta'sir qilishini kuzatadigan simulyatsiyani ishga tushiradi. Bu jarayon avtomatlashtirilgan – zamonaviy analitik texnologiyalar millionlab ushbu simulyatsiyalarni amalga oshiradi va ular ustida ishlayotgan muammoni hal qilishga yordam beradigan model yoki g‘oyani topmaguncha barcha mumkin bo‘lgan o‘zgaruvchilarni moslashtiradi.
Bill Geyts bitta kompakt diskning qog'oz tarkibini osib qo'yadi
Yaqin vaqtgacha ma'lumotlar faqat elektron jadvallar yoki ma'lumotlar bazalari bilan cheklangan edi - va hamma narsa juda tartibli va tartibli edi. Qator va ustunlarga osonlikcha tartibga solinib bo'lmaydigan har qanday narsa bilan ishlash juda qiyin deb hisoblangan va e'tiborga olinmagan. Biroq, saqlash va tahlil qilish sohasidagi yutuqlar biz har xil turdagi katta hajmdagi ma'lumotlarni olishimiz, saqlashimiz va qayta ishlashimiz mumkinligini anglatadi. Natijada, bugungi kunda "ma'lumotlar" ma'lumotlar bazasidan tortib fotosuratlar, videolar, ovozli yozuvlar, yozma matnlar va sensor ma'lumotlarigacha bo'lgan hamma narsani anglatishi mumkin.
Bu chalkash ma'lumotlarni tushunish uchun Big Dat-ga asoslangan loyihalar ko'pincha sun'iy intellekt va mashinani o'rganishdan foydalangan holda ilg'or tahlillardan foydalanadi. Kompyuterlarni aniq ma'lumotlar nima ekanligini aniqlashga o'rgatish orqali, masalan, naqshni aniqlash yoki tabiiy tilni qayta ishlash orqali biz ularga modellarni o'zimizdan ko'ra tezroq va ishonchliroq aniqlashga o'rgatishimiz mumkin.
Big Date qanday ishlatiladi?
Sensor ma'lumotlari, matn, ovoz, foto va video ma'lumotlari haqidagi doimiy ravishda o'sib borayotgan ma'lumotlar oqimi biz ma'lumotlardan bir necha yil oldin tasavvur qilishning iloji bo'lmagan usullarda foydalanishimiz mumkinligini anglatadi. Bu deyarli barcha sohalarda ishbilarmonlik dunyosini inqilob qilmoqda. Bugungi kunda korxonalar qaysi turdagi xaridorlar va qachon xarid qilishni xohlashlarini ajoyib aniqlik bilan bashorat qilishlari mumkin. Big Data, shuningdek, kompaniyalarga o'z bizneslarini yanada samaraliroq qilishda yordam beradi.
Hatto biznes doirasidan tashqarida ham, Big-Data bilan bog'liq loyihalar allaqachon dunyomizni turli yo'llar bilan o'zgartirishga yordam bermoqda:
Sog'liqni saqlashni yaxshilash - Ma'lumotlarga asoslangan tibbiyot kasalliklarni erta aniqlash va yangi dori vositalarini ishlab chiqishga yordam beradigan modellar uchun katta hajmdagi tibbiy ma'lumotlar va tasvirlarni tahlil qilishga qodir.
Tabiiy va texnogen ofatlarni bashorat qilish va oqibatlarini bartaraf etish. Sensor ma'lumotlarini zilzilalar qayerda sodir bo'lishini bashorat qilish uchun tahlil qilish mumkin va odamlarning xatti-harakatlari tashkilotlarga omon qolganlarga yordam berish uchun maslahatlar beradi. Big Dates texnologiyasi butun dunyo bo'ylab urush zonalaridan qochqinlar oqimini kuzatish va himoya qilish uchun ham qo'llaniladi.
Jinoyatchilikning oldini olish. Politsiya kuchlari resurslardan yaxshiroq foydalanish va kerak bo'lganda rag'batlantirish choralarini ko'rish uchun o'zlarining razvedka va ochiq manba ma'lumotlarini o'z ichiga olgan ma'lumotlarga asoslangan strategiyalarni tobora ko'proq qabul qilmoqdalar.