近期，OpenAI的最新推理AI模型o1在邏輯推導過程中展現出了一個令人驚訝的現象：它會在思考時突然切換至中文、波斯語或其他非預設語言。這一發(fā)現引起了廣泛關注和討論。以“strawberry”一詞為例，當被問及該詞中有多少個“r”時，o1的內部推理路徑或許會短暫地涉及其他語言，但最終，它依然會用英語給出準確答案。
對于這一奇異現象，業(yè)界專家紛紛提出了自己的見解。Hugging Face的首席執(zhí)行官推測，o1模型的訓練數據中可能包含了大量的中文內容，這種數據構成或許促使模型在推理時自然而然地引入了中文元素。Google DeepMind的研究員也指出，OpenAI可能借助了第三方的中文數據標注服務，這些服務可能在無形中影響了o1的語言處理模式。
另一些專家則從不同角度進行了解讀。他們認為，o1模型可能是在嘗試利用它認為最高效的語言工具來解決所謂的“幻覺”問題，即模型在處理信息時可能出現的誤解或偏差。阿爾伯塔大學的AI研究員進一步解釋說，對于模型而言，各種語言并無本質區(qū)別，它只是按照既定的算法，對所有的文本數據以token（如詞匯、音節(jié)或字符）為單位進行統一處理。
盡管這一現象引發(fā)了諸多猜測和討論，但OpenAI方面至今尚未對此作出正式回應，也沒有承認或否認這一現象的存在。同樣，AI領域的專家們也未能給出一個明確的答案，不過他們的各種推測為我們理解這一現象提供了寶貴的思路。
