AI評測中心啟動 語言模型擬定10項評測
數位部6日舉行AI產品與系統評測中心啟動儀式,確保AI技術可被正確使用、促進產業應用,數位部長唐鳳表示,AI評測不只是純粹的技術,要結合在地文化,不能只是交給國際大廠片面決定,未來相關產品可在出廠前做評測。
因應AI新興科技發展,為降低AI科技發展帶來的潛在負面影響,數位部表示,AI評測中心未來將致力於推動國內自行研發AI模型功效評測工具,針對不同產品、系統與服務類別,參考對應之國際試驗方法,來發展我國對應的評測工具與系統,符合國內試驗需求。
數位部表示,先以語言模型作為評測對象,擬定10項AI評測項目,包含安全性、可解釋性、彈性、公平性、準確性、透明性、當責性、可靠性、隱私及資安等10項目,Meta也對評測表達興趣。
唐鳳致詞時表示,AI快速發展,也加速對社會帶來衝擊,AI評測不只是純粹的技術,也因為每個地方文化不同,同一句話可能在不同地方會有不同解讀,外界很關心相關AI產品不能只是交給國際大廠片面決定,也得透過微調去適應各地文化,未來相關產品可在出廠前做評測。
唐鳳會後受訪時表示,透過評測,希望讓國內外廠商了解什麼樣的AI才符合社會期待,AI要誠實、要無害,要符合地方用詞才行。
活動現場包含Meta跟微軟代表都有出席,媒體關注是否意味未來也有意願送測,唐鳳表示,一直有跟Meta保持互動,Meta對評測也有表達意願,加上TAIDE(可信任人工智慧對話引擎)也是透過Meta釋出的模型,因此對這項模型架構已有測試經驗,數位部也有跟微軟討論到未來希望開放源碼AI上進一步合作。