Misteri Ejaan "Strawberry": Tantangan AI dalam Menangani Kata-kata yang Tidak Lazim

Meskipun canggih, AI memiliki keterbatasan, termasuk tidak mengenali jumlah huruf "r" dalam kata "strawberry". Model bahasa besar (LLM) memecah kata menjadi token (misalnya huruf atau suku kata), tetapi tidak memahami cara penyusunannya. Token ini diubah menjadi angka dan dikontekstualisasikan untuk menghasilkan respons. Akibatnya, AI mungkin tahu bahwa "straw" dan "berry" membentuk "strawberry", tetapi tidak memahami bahwa itu berisi 10 huruf, termasuk 3 huruf "r".