ILMU 0.1 mengatasi model lain di seluruh dunia pada penanda aras MMLU Melayu.
Malaymmlu adalah pemahaman bahasa multitask pertama (MLU) untuk bahasa Melayu. Penanda aras terdiri daripada 24,213 soalan yang merangkumi tahap pendidikan utama (Tahun 1-6) dan menengah (Borang 1-5) di Malaysia, yang merangkumi 5 topik luas yang terus membahagikan kepada 22 mata pelajaran.
Ilmu 0.1 berjaya melepasi peperiksaan kebangsaan PT3 dan SPM dalam bahasa Melayu (Bahasa melayu), membolehkannya menyokong semua industri termasuk kewangan, pendidikan, penjagaan kesihatan, dan perkhidmatan awam, dengan berkesan dalam penyetempatan.
Berikut adalah esei sampel oleh ILMU 0.1:
sumber rujukan
YTL AI Labs
MalayMMLU: A Multitask Benchmark for the Low-Resource Malay Language (Official site)
https://github.com/UMxYTL-AI-Labs/MalayMMLU
YTL Mengumumkan Model Bahasa Raya Ilmu – Menerajui Model Lain Dalam Bahasa Malaysia, Skor Ujian BM PT3 Dan SPM