中新網(wǎng)北京6月23日電(記者 李京澤)6月23日，北京第二外國語學(xué)院發(fā)布《大語言模型翻譯質(zhì)量評測報(bào)告 BISU-AiTQA(v1.0)》。

　　據(jù)悉，該評測突破國際現(xiàn)有評測以英語為核心的現(xiàn)狀，構(gòu)建了以漢語為核心，覆蓋多語種、多領(lǐng)域的大語言模型翻譯質(zhì)量評測體系，具有開創(chuàng)性意義，是促進(jìn)中外人文交流，提升漢語全球表達(dá)力的積極探索。

　　基于多年的外語學(xué)科與教學(xué)積淀、結(jié)合前期翻譯評測研究成果，北二外集中英語、日語、俄語、法語、阿拉伯語五個(gè)語種師生力量，面向ChatGPT、Claude、Gemini、Grok、DeepSeek和通義千問六個(gè)國內(nèi)外語言大模型，從當(dāng)代文學(xué)、黨政文獻(xiàn)和外事新聞三個(gè)領(lǐng)域開展翻譯質(zhì)量測評研究。

　　據(jù)了解，BISU-AiTQA(v1.0)以漢語為核心、以中國特色文本為基礎(chǔ)，從語言特征維度、神經(jīng)網(wǎng)絡(luò)維度構(gòu)建了包括詞匯多樣性、句法復(fù)雜度、篇章銜接度、語言可接受度等在內(nèi)的六項(xiàng)指標(biāo)體系，著重關(guān)注譯文的語言使用特性，可有效識別模型在詞法、句法和篇章銜接方面的能力，同時(shí)考察模型對語義的理解與語言表達(dá)能力。

　　這不僅實(shí)現(xiàn)了對大語言模型譯文的多維分析，更以實(shí)證方式檢驗(yàn)了模型對中國話語、文化意涵與政策表述的處理能力，填補(bǔ)了“以漢語為核心”的多語種評測空白。

　　從評測結(jié)果來看，生成式人工智能目前不完全具備處理復(fù)雜語言的能力，在借助人工智能技術(shù)時(shí)，使用者必須具有判斷力，而培養(yǎng)這種判斷力正是外語教育重要的育人功能之一。

　　人工智能時(shí)代的外語學(xué)習(xí)，必要且必須。基于這樣的邏輯，BISU-AiTQA(v1.0)脫胎于文工交叉學(xué)科，又反哺語言教學(xué)，項(xiàng)目中的多語種多領(lǐng)域語料及翻譯評測指標(biāo)可廣泛應(yīng)用于翻譯課程、語言測試、語言分析等教學(xué)場景，為推動(dòng)翻譯教育與語言研究的數(shù)字化轉(zhuǎn)型提供重要的實(shí)踐平臺。(完)