Raqamli texnalogiyalar fakulteti dasturiy injenerig kafedrasi

Gensim Yashirin Dirichlet ajratish (LDA) , Tasodifiy proyeksiyalar (RP) , yashirin semantik tahlil (LSA/LSI/LVD) va ierarxik Dirichlet jarayoni (HDP) kabi bir nechta mashhur algoritmlar uchun xotiradan mustaqil amalga oshirish imkoniyatlarini taklif etadi .
Gensim boshqa dasturlash tillari bilan integratsiyani osonlashtiradigan silliq API yordami bilan ta'minlangan, shu bilan birga keng ko'lamli hujjatlar va o'quv qo'llanmalar sizni dasturlash sayohatingizda yo'naltiradi. Gensim-dan foydalanishning asosiy sharti uni ishga tushirish uchun NumPy va Scipy paketlaridir.
Resurslar -

• 
  gensim Documentation — Rasmiy hujjatlar va oʻquv qoʻllanmalari. Darslar sahifasi juda foydali.
  

● PYNLPI

FoLiA XML va boshqa ko'plab umumiy NLP formatlari (CQL, Giza, Moses, ARPA, Timbl va boshqalar) bo'yicha keng funksionallik.
“ Ananas ” deb talaffuz qilingan bu Python uchun ochiq manbali tabiiy tillarni qayta ishlash kutubxonasi. PyNLPl murakkab ma'lumotlar turlari va algoritmlarni qo'llab-quvvatlash bilan soddalashtirilgan modellarni yaratish va n-gramm va chastotalar ro'yxatini olishdan tortib turli vazifalar uchun idealdir.
Shuningdek, u Moses , Timbl , Giza va boshqa bir nechta NLP fayl formatlarini qo'llab-quvvatlash bilan jihozlangan. PyNLPl kutubxonasi bir nechta paketlardan iborat bo'lib, ular taklif qiladigan narsalarning o'ziga xos xususiyatlariga kiradi.
Quyida ushbu paketlardan bir nechtasi keltirilgan:
● pynlpl.datatypes qo'shimcha ma'lumotlar turlarini qo'shadi
● pynlpl.formats.giza GIZA++ soʻzlarni hizalamasidan maʼlumotlarni oʻqish uchun
● pynlpl.formats.tmbl Timbl ma'lumotlarini o'qish imkonini beradi
● pynlpl.textprocessors oddiy tokeniser va n-gramm ekstraktsiyasi sifatida
● CGN nutq qismi teglarini tahlil qilish uchun pynlpl.formats.cgn