Bias Bahasa Dorong Jepang Ciptakan Teknologi ChatGPT Versi Sendiri

"Secara teknis hal ini tidak dapat diatasi, namun hanya masalah sumber daya," kata dia.

Gunakan Superkomputer

Salah satu upaya besar untuk menciptakan LLM Jepang adalah dengan menggunakan superkomputer Jepang Fugaku, salah satu yang tercepat di dunia, yang melatihnya terutama pada input bahasa Jepang. Didukung oleh Institut Teknologi Tokyo, Universitas Tohoku, Fujitsu dan kelompok pusat penelitian RIKEN yang didanai pemerintah, LLM yang dihasilkan diharapkan akan dirilis tahun depan.

Superkomputer ini akan bergabung dengan LLM sumber terbuka lainnya dalam membuat kodenya tersedia untuk semua pengguna, tidak seperti GPT-4 dan model kepemilikan lainnya. Menurut Sakaguchi, yang terlibat dalam proyek ini, tim berharap dapat memberikan setidaknya 30 miliar parameter, yang merupakan nilai yang mempengaruhi keluarannya dan dapat menjadi tolak ukur ukurannya.
Halaman Selanjutnya....