日语复杂性挑战：ChatGPT在处理日语上面临的问题与前景

【HowToTech科技】9月15日消息，ChatGPT的热度或许在全球略有下降，但在日本，这一聊天机器人仍然备受关注。据悉，日本政府正积极合作，与NEC、富士通、软银等大型科技公司合作，共同开发适用于日语的大型语言模型(LLM)，预计将投入数亿美元的巨资。

研究自然语言处理的日本东北大学研究员Keisuke
Sakaguchi指出，当前的大型语言模型在英语方面表现出色，但在处理日语方面表现一般。由于日语的复杂性，ChatGPT有时会生成罕见的字符，甚至是一些奇怪的未知单词，让用户感到困惑。

HowToTech科技了解到，东京大学物理学家Passaglia认为，虽然目前的LLM在性能上远远落后于GPT-4，但未来有望迎头赶上甚至超越GPT-4的水平。他强调，这仅仅是一个资源问题，而不是技术上无法克服的问题。

值得一提的是，创建LLM需要利用日本超级计算机Fugaku，主要用于训练日语输入。不同于GPT-4和其他专有模型，LLM将向所有用户提供其代码，以促进更广泛的应用。

东京庆应义塾大学医学院医学技术研究员Shotaro
Kinoshita表示，如果日语版的ChatGPT能够准确表达，它将为想学习日语或从事日本研究的人提供巨大帮助，从而产生积极的社会影响。

总之，尽管ChatGPT在全球热度有所下降，但日本政府和科技公司的合作计划仍在积极推进，希望能够开发出能够在处理日语上表现出色的大型语言模型，为日本及全球的用户提供更好的自然语言处理体验。