【導(dǎo)讀】在2026年上海世界移動通信大會（MWC上海）期間，羅德與施瓦茨（以下簡稱'R&S'）與中國移動研究院聯(lián)合展示了基于生成式AI的創(chuàng)新測試解決方案。該方案依托 CMX500一體化信令測試儀，首次實現(xiàn)了在不同網(wǎng)絡(luò)條件下對端側(cè)生成式AI用戶體驗的量化測量，開創(chuàng)了生成式AI用戶體驗測試領(lǐng)域的先河。
生成式AI，顧名思義就是利用大語言模型生成用戶所需的內(nèi)容包括文字，圖片，視頻等。隨著大語言模型以及相關(guān)算力和應(yīng)用的迭代發(fā)展，網(wǎng)絡(luò)中各種終端，例如手機、AI眼鏡、機器人使用生成式AI的業(yè)務(wù)越來越多，但是對于生成式AI方面的測試系統(tǒng)目前較為缺乏，業(yè)內(nèi)還沒有一套成熟的指標(biāo)和測試標(biāo)準(zhǔn)體系評估用戶體驗。3GPP、GTI等組織正在展開相關(guān)的研究工作。
此次聯(lián)合展示的生成式AI用戶體驗測試床正是為解決上述挑戰(zhàn)而設(shè)計。在測試系統(tǒng)架構(gòu)中，大語言模型部署于服務(wù)器端（或者云端），CMX500一體化信令測試儀與裝載了客戶端測試應(yīng)用的智能終端建立無線連接。CMX500可靈活配置網(wǎng)絡(luò)參數(shù)、信道衰落模型、時延抖動、射頻損傷等，真實模擬從理想覆蓋到弱場邊緣的各類無線環(huán)境。通過終端側(cè)應(yīng)用軟件輸入問題并接收大模型的推理響應(yīng)，計算首Token到達(dá)時間（TTFT）、每秒Token生成數(shù)（TPS）等核心指標(biāo)，并通過上位機軟件采集分析測量數(shù)據(jù)，生成相應(yīng)的圖表。這一方法使得端側(cè)的生成式AI應(yīng)用在不同網(wǎng)絡(luò)條件下的用戶體驗可被量化、比較，可以用來優(yōu)化端側(cè)生成式AI的應(yīng)用設(shè)計，也為將來的網(wǎng)絡(luò)優(yōu)化提供了參考。
圖：生成式AI測試床系統(tǒng)框架
作為本次測試方案的核心平臺，CMX500是一款一體化信令測試儀，支持SA/NSA雙模架構(gòu)、FR1至FR3頻段覆蓋（最高18 GHz），內(nèi)建IMS服務(wù)器，可一站式完成射頻一致性、協(xié)議棧驗證、VoNR聲學(xué)及載波聚合測試，是面向5G-Advanced和6G研發(fā)的核心測試平臺。
中國移動集團級首席專家、中關(guān)村泛聯(lián)院首席科學(xué)家劉光毅表示：“面向6G智慧泛在愿景，移動通信網(wǎng)絡(luò)正超越傳統(tǒng)通信范疇，通過網(wǎng)絡(luò)內(nèi)生算力，為用戶提供無處不在、超低時延的智能服務(wù)。這一網(wǎng)絡(luò)服務(wù)范式的轉(zhuǎn)變，也對新型網(wǎng)絡(luò)AI服務(wù)指標(biāo)體系和測試方案提出了更高要求。在此背景下，R&S與中國移動研究院聯(lián)合共建測試床，已成功實現(xiàn)生成式AI用戶體驗在不同無線環(huán)境下的測試驗證。未來，雙方計劃進一步擴展測試指標(biāo)與應(yīng)用場景，為6G賦能AI技術(shù)的演進與驗證，以及測試標(biāo)準(zhǔn)的制定等提供有力支撐。”
羅德與施瓦茨產(chǎn)品與系統(tǒng)部高級總監(jiān)金海良表示：'在大語言模型的高速發(fā)展時代，R&S和中國移動研究院聯(lián)合開發(fā)的測試床，為業(yè)內(nèi)大家關(guān)注的生成式AI的用戶體驗測試方法樹立了標(biāo)桿。我們很高興此次能夠與中國移動研究院聯(lián)合展示這一成果。相信未來基于這一測試架構(gòu)，雙方能夠衍生出更多的測試場景和行業(yè)范式，進一步推動生成式AI用戶體驗測試的標(biāo)準(zhǔn)化，為6G AI時代的到來做好充分的技術(shù)儲備。
