Penilaian awal atas kinerja LLM WIZ.AI juga menunjukkan hasil yang menjanjikan. Dibandingkan 13B LLM arus utama, misalnya, LLM WIZ.AI dapat melampaui kinerja 13B LLM bahasa Indonesia dalam seluruh metrik penting. Keunggulan kinerja LLM WIZ.AI terlihat jelas dari indikator Hellaswag (commonsense inference) sebesar 33%, disusul sejumlah indikator lain, yakni ARC (reasoning challenge) dan TruthfulQA sebesar 20%, serta MMLU sebesar 7%.
Dibandingkan 70B LLM arus utama, kinerja LLM WIZ.AI juga unggul dalam tiga metrik penting bahasa Indonesia dengan rata-rata 4%, termasuk ARC (reasoning challenge) , Hellaswag (commonsense inference), dan TruthfulQA.
Kinerja LLM WIZ.AI bahkan melampaui LLM arus utama di domain spesifik, seperti perbankan, keuangan, dan e-commerce. Ketika diminta untuk mencantumkan bank terbesar di Indonesia, LLM arus utama menyajikan daftar bank secara umum. Di sisi lain, LLM WIZ.AI memberikan jawaban yang tepat, serta mampu mencantumkan daftar bank terbesar dengan data terkini dan deskripsi lengkap.
LLM WIZ.AI sepenuhnya dikembangkan di pasar lokal, serta dirancang untuk aplikasi berstandar korporasi. Lebih lagi, LLM WIZ.AI menawarkan fitur analisis data “berstandar korporasi” (enterprise-grade), serta respons cepat dan keamanan yang lebih baik.
Setelah penyempurnaan dan optimasi, LLM WIZ.AI bekerja 2,5 kali lebih cepat seperti 13B LLM arus utama. Sementara, kinerja cepat ini tidak mengurangi aspek privasi dan keamanan. LLM WIZ.AI memiliki sistem keamanan berstandar korporasi yang melindungi informasi dan data sensitif. Sistem keamanan ini juga menjamin penggunaan data yang hanya dibatasi untuk pengembangan dan pemeliharaan LLM.
Kehadiran LLM bahasa Indonesia akan membuat bahasa Indonesia semakin dikenal. Saat ini, LLM bahasa Indonesia hanya tersedia untuk penggunaan komersial. Namun, WIZ.AI tengah merencanakan peluncuran versi terbuka (open-source) untuk publik. “Kami memimpin inisiatif ini guna mengembangkan ekosistem LLM yang dinamis.
Dalam ekosistem tersebut, pemain utama AI, peneliti AI, dan penggemar AI akan bekerja sama mengembangkan inovasi LLM dan AI di Indonesia. Mereka juga akan memperkenalkan bahasa Indonesia dalam AI arus utama, serta meningkatkan pengaruh pasar Asia Tenggara di pasar global,” kata Jennifer Zhang.
Leave a Reply
Situs ini menggunakan Akismet untuk mengurangi spam. Pelajari bagaimana data komentar Anda diproses.
