Big Data nima? Katta ma'lumotlar (inglizcha big data, [ˈbɪɡ ˈdeɪtə])

Ma'lumotlarni qidirishning dolzarbligi va zaruriyati

• 
  Katta hajmdagi muammolar («Data explosion»):
  
  • 
    Avtomatik ma'lumotlarni yig'ish vositalari, ma'lumotlar bazasini keng joriy etish, elektron hujjat aylanishi, WWW, multimedia arxivlari va boshqalar. Hamma narsa saqlangan ma'lumotlarning tuzilishi hajmi va murakkabligi oshishiga olib keladi..
    
• 
  An'anaviy vosita va usullar katta hajimli ma`lumotlarni boshqara olmaydi :
  
  • 
    Axborot qidirish va statistik tahlil hamma joyda yordam bermaydi - juda ko'p ma'lumotlar, murakkab tuzilma ega. Bu siz nimani izlash kerakligini aniq bilishingiz lozimligini anglatadi.
    
  • 
    Xulosa: juda ko'p ma'lumotlar topilsa ham tahlilchi uchun kam ma'lumot hisoblanadi.
    

Zarurat: Katta hajmli va murakkab tuzilmali ma'lumotlarni avtomatlashtirilgan tahlil qilish uchun dasturiy vositalarni ishlab chiqish.


Ma`lumotlarni intellektual tahlil qilish
(Data Mining). Ma'lumotlarni intellektual tahlil qilish tizimlari (MITT) - bu dasturiy ta'minot qarorlarini qo'llab-quvvatlash tizimlari sinfi bo'lib, ularning vazifasi katta hajmdagi heterogen, murakkab tuzilgan ma'lumotlarda yashirin, ilgari noma'lum, mazmunli va potentsial foydali qoidalar (modellar) ni qidirishdir.

• 
  Predmet sohasini tahlili:
  
  • 
    fan sohasi, tahlil maqsadlari, qo'llash vazifalari, foydalanish holatlari bo'yicha zaruriy muhim bilimlarni aniqlash va shakllantirish.
    
• 
  Tahlil uchun ma'lumotlarni shakllantirish va tayyorlash:
  
  • 
    "xom (tayyor bo`lmagan) " ma'lumotlarni qidirish (yoki tanlash), yig'ish (konsolidatsiya) quyi tizimini amalga oshirish mumkin
    
  • 
    ma'lumotlarni oldindan qayta ishlash (normallashtirish, diskretlashtirish, yetishmayotgan qiymatlarni qayta ishlash, artefaktni olib tashlash, mustahkamlikni tekshirish)
    
  • 
    o'lchamlarni qisqartirish, muhim xarakteristikalar tanlash, integral ko'rsatkichlar va invariantlarni hisoblash
    
• 
  Yechish kerak bo'lgan tahlil muammosining turini aniqlash:
  
  • 
    tasniflash, bashorat qilish, klasterlash, istisnolarni qidirish, assotsiativ tahlil va boshqalar.