Kelemahan LLM

LLM sangat kuat, tetapi mereka tidak sempurna. Ada banyak jebakan yang harus Anda waspadai saat menggunakannya.

Mengutip Sumber

LLM untuk sering kali tidak dapat mengutip sumber dengan akurat. Ini karena mereka tidak memiliki akses ke Internet, dan tidak tepat ingat dari mana informasi mereka berasal. Mereka akan sering menghasilkan sumber yang terlihat bagus, tetapi benar-benar tidak akurat.

Bias

LLM sering memiliki kecenderungan untuk menghasilkan respons stereotip. Meskipun ada perlindungan, terkadang mereka mengatakan hal-hal seksis/rasis/homofobia. Hati-hati saat menggunakan LLMs dalam aplikasi yang berhubungan dengan konsumen, dan juga hati-hati saat menggunakannya dalam penelitian (mereka dapat menghasilkan hasil yang bias).

Halusinasi

LLMs sering kali menghasilkan kebohongan ketika ditanya pertanyaan yang mereka tidak tahu jawabannya. Terkadang mereka akan menyatakan bahwa mereka tidak tahu jawabannya, tapi sebagian besar waktu mereka akan dengan yakin memberikan jawaban yang salah.

Matematika

LLM seringkali buruk dalam matematika. Mereka kesulitan dalam memecahkan masalah matematika sederhana, dan sering tidak dapat menyelesaikan masalah matematika yang lebih kompleks.

Prompt Hacking

Pengguna sering kali dapat memperdaya LLM untuk menghasilkan konten apa pun yang mereka inginkan. Baca lebih lanjut tentang ini di sini.

Sander Schulhoff

Sander Schulhoff is the Founder of Learn Prompting and an ML Researcher at the University of Maryland. He created the first open-source Prompt Engineering guide, reaching 3M+ people and teaching them to use tools like ChatGPT. Sander also led a team behind Prompt Report, the most comprehensive study of prompting ever done, co-authored with researchers from the University of Maryland, OpenAI, Microsoft, Google, Princeton, Stanford, and other leading institutions. This 76-page survey analyzed 1,500+ academic papers and covered 200+ prompting techniques.