Alisher Navoiy nomidagi Toshkent davlat o‘zbek tili va adabiyoti universiteti



Download 7,21 Mb.
Pdf ko'rish
bet114/398
Sana26.02.2022
Hajmi7,21 Mb.
#467559
1   ...   110   111   112   113   114   115   116   117   ...   398
Bog'liq
Тайёр Миллий корпус тўплам 17.05

So‘z 
turkumi 
(O‘zbek 
tilida 
nomlanishi) 
UZPOS 
UPOS 
So‘z 
turkumi 
(Ingliz 
tilida 
nomlanishi) 
Namuna 
Fe’l 
FEL 
VERB 
Verb 
o‘qimoq 
Ot 
OT 
NOUN 
Noun 
kitob 
PROPN 
Proper noun 
Samarqand 
Sifat 
SIF 
ADJ 
Adjective 
aqlli 
Ravish 
RAV 
ADV 
Adverb 
bugun 
Son 
SON 
NUM 
Numeral 
besh 
Olmosh 
OLM 
PRON 
Pronoun 
men 
Ko‘makchi 
KMK 
ADP 
Adposition 
uchun 
Bog‘lovchi 
BGL 
CCONJ 
Coordinating 
conjunction 
va 
SCONJ 
Subordinating 
conjunction 
chunki 
Yuklama 
YUKL 
AUX 
Auxiliary 
ham 
Undov so‘z 
UND 
INTJ 
Interjection 
eh 
Taqlid so‘z 
TAQ 
ship-ship 
Modal so‘z 
MDL
shubhasiz 
Tinish belgisi 
TB 
PUNCT 
Punctuation 

Simvol 
SIM 
SYM 
Symbol 

Boshqa 


Other 
hello 
1-jadval. Soʻz turkumlari ro‘yxati 
Teglash jarayoni Google unversal so‘z turkumlariga asoslangan Universal Dependencies v2 
(UD) izohlash koʻrsatmalariga binoan amalga oshirildi. Korpusda teglashning bu shakli ham mavjudligi 
oʻzbek tilining boshqa tillararo lingvistik usullarni oʻrganishni osonlashtiradi, tahlil algoritmlari 
natijalarini taqqoslashga imkon beradi. UD ko‘rsatmalari bo‘yicha teglangan korpuslar 100 dan ortiq tillar 
uchun ishlab chiqilgan. 


Alisher Navoiy nomidagi Toshkent 
davlat o‘zbek tili va adabiyoti 
universiteti 
“O‘ZBEK MILLIY VA TA’LIMIY 
KORPUSLARINI YARATISHNING NAZARIY 
HAMDA AMALIY MASALALARI”
Xalqaro ilmiy-amaliy konferensiya
Vol. 1
№. 01 (2021) 
96 
Matnli korpus ma’lumotlarini yig‘ish uchun O‘zbekistonda mashhur milliy qidiruv tizimi 
statistikasiga ko‘ra tashrif buyuruvchilar soni va ko‘rishlar soni bo‘yicha yetakchi o‘rinni egallab 
kelayotgan “Daryo” internet nashri (
https://daryo.uz
) tanlab olindi. Daryo onlayn xabarlar sayti 
maqolalarining so‘z turkumlarini qo‘lda teglab matnli korpus yaratish masalasini bajarish uchun afzallik 
tomonlaridan biri bu xabar maqolalari mualliflar, tahrirlovchilar tomonidan imloviy xatolarning imkon 
qadar to‘g‘irlanganligi va kategoriyalanganligidir. Bu esa tabiiy tilni qayta ishlashning yana bir masalasi 
matnlarni tasniflashda matnning so‘z turkumiga asoslangan xususiyatlarini tasniflash masalalarini hal 
qilishdagi samarasini tekshirishga yordam beradi.
Matnli ma’lumotlarini yig‘ish o‘zimiz ishlab chiqqan dastur yordamida bajarildi. Ushbu dasturni 
ishlab chiqishda Requests Python Library va Beautiful Soup Python package dan foydalanildi. 
“Daryo” onlayn xabarlar saytida 50 dan ortiq kategoriyalar mavjud bo‘lib, ulardan 10 tasi: dunyo, 
ilm-fan, madaniyat, mahalliy, shou-biznes, sport, texnologiyalar, avto, foto, kino kategoriyalari tanlandi. 
Kategoriyalarni tanlashda ulardagi maqolalar soni va maqolalardagi belgilar soni ko‘proq bo‘lganlari 
olindi. Kategoriyalar bo‘yicha maqolalar sonining muvozanatini saqlash uchun har bir kategoriyadan 
ko‘pi bilan 2000 ta maqola olinib, u xabarlar maqolalari 01/01/2016 dan va 31/12/2020 gacha onlayn 
nashr qilingan yangiliklardir. Ma’lumotlar to‘plamida har bir maqolaga tegishli yangilik havolasi, matni, 
nomi, nashr etilgan sanasi, toifasi, matn uzunligi va meta ma’lumotlari to‘plangan. Maqola matnlari 
HTML teglar, URL manzillar va turli xil emojilardan tozalangan. 2-jadvalda to‘plangan matnli korpus 
haqidagi statistik ma’lumotlar keltirilgan. 

Download 7,21 Mb.

Do'stlaringiz bilan baham:
1   ...   110   111   112   113   114   115   116   117   ...   398




Ma'lumotlar bazasi mualliflik huquqi bilan himoyalangan ©hozir.org 2024
ma'muriyatiga murojaat qiling

kiriting | ro'yxatdan o'tish
    Bosh sahifa
юртда тантана
Боғда битган
Бугун юртда
Эшитганлар жилманглар
Эшитмадим деманглар
битган бодомлар
Yangiariq tumani
qitish marakazi
Raqamli texnologiyalar
ilishida muhokamadan
tasdiqqa tavsiya
tavsiya etilgan
iqtisodiyot kafedrasi
steiermarkischen landesregierung
asarlaringizni yuboring
o'zingizning asarlaringizni
Iltimos faqat
faqat o'zingizning
steierm rkischen
landesregierung fachabteilung
rkischen landesregierung
hamshira loyihasi
loyihasi mavsum
faolyatining oqibatlari
asosiy adabiyotlar
fakulteti ahborot
ahborot havfsizligi
havfsizligi kafedrasi
fanidan bo’yicha
fakulteti iqtisodiyot
boshqaruv fakulteti
chiqarishda boshqaruv
ishlab chiqarishda
iqtisodiyot fakultet
multiservis tarmoqlari
fanidan asosiy
Uzbek fanidan
mavzulari potok
asosidagi multiservis
'aliyyil a'ziym
billahil 'aliyyil
illaa billahil
quvvata illaa
falah' deganida
Kompyuter savodxonligi
bo’yicha mustaqil
'alal falah'
Hayya 'alal
'alas soloh
Hayya 'alas
mavsum boyicha


yuklab olish