Kylm. Toolkit Pemodelan Bahasa Kyoto
Unduh sekarang

Kylm. Peringkat & Ringkasan

Kylm. Tag

model toolkit. bahasa Model pemodel bahasa pemodel toolkit. pemodel

Kylm. Keterangan

Toolkit Pemodelan Bahasa Kyoto Kylm adalah alat pemodelan bahasa sumber gratis dan terbuka yang ditulis di Jawa untuk aplikasi pemrosesan bahasa alami. Sylm dapat menangani pemodelan karakter-by-karakter dari kata-kata yang tidak diketahui, kombinasi model bahasa, perbandingan, dan evaluasi, serta sejumlah teknik smoothing. Berikut adalah beberapa fitur utama dari "Kylm": · Dua program, countngrams dan crossentropy · Dukungan untuk model bahasa N-gram dan beberapa teknik smoothing (kemungkinan maksimum, selamat tinggal, diskon absolut, Witten-Bell, Kneser-NEY) · Dukungan untuk input / output dalam ARPA dan format biner · Skrip Junit untuk melakukan tes regresi Persyaratan: · Java. Apa yang baru dalam rilis ini: · Dukungan untuk model bahasa berbasis kelas · Dukungan untuk peningkatan kneser-ney yang lebih baik. 0.0.3 (6/22/2009) · Memperbaiki penciptaan string kosong ketika beberapa ruang putih ada berbagai peningkatan kecepatan dan memori (penghapusan daftar ditautkan, pengindeksan node root) · Menambahkan dukungan untuk pemodelan berbasis karakter dengan kata-kata yang tidak diketahui · Memperbaiki pemangkasan sehingga berfungsi dengan model yang dihaluskan dengan baik · Memperbaiki masalah ketika data perpipaan masuk ke countngrams memperbaiki masalah dengan output WFST yang membunuh konteks awal kalimat ver. 0,0,2 (5/28/2009) · Fitur baru: sekarang mungkin untuk memangkas N-gram dengan menghitung daftar kosakata yang ditetapkan dapat digunakan untuk membatasi output kosakata dalam Format WFST yang mungkin telah ditingkatkan dokumentasi · Masalah luar biasa: pemangkasan tidak berfungsi bersama dengan smoothing yang baik

Kylm. Perangkat Lunak Terkait