發布時間:2023/11/18 16:15
圖文/CTWANT
隨著生成式聊天機器人CahtGPT在全球的爆火,AI機器人可以說是開始逐步進入人們的日常生活中,不少人都會開始使用AI機器人來輔助自己的工作。但現在就有公司發明檢測AI,專門針對各家廠商的AI機器人進行內容「正確性」上的檢測,並且將各家機器人「幻覺度」進行排名,其中冠軍就是大家所熟知的ChatGPT,而排名最末的竟然是Google所推出的PalM 2。
根據《toms hardware》報導指出,先前就有第三方研究機構在研究各家AI機器人之後,確定了AI機器人會有「幻覺(hallucinations)」的產生,AI機器人會憑空編造一些不存在的資訊來回答。
廣告 更多內容請繼續往下閱讀
先前其實就有傳出類似的案例,美國紐約律師事務所「Levidow, Levidow & Oberman」施瓦茨(Steven A Schwartz)就在一次訴訟中,提出由ChatGPT所撰寫的文件,而其中引用了6起步存在的案件當作判例,結果遭到對手公司法律團隊識破,更被法院要求解釋。
而且根據研究人員的研究,他們發現短時間內似乎無法解決AI機器人產生幻覺的問題。研究AI科技的布朗大學教授文卡達蘇巴馬尼安(Suresh Venkatasubramanian)也表示,與其說AI機器人會虛構不存在的事情,還不如說,AI機器人所產生的回答比較像是小孩子隨口說出的故事,因為不懂得事情的真偽。
廣告 更多內容請繼續往下閱讀
為了釐清AI幻覺度的問題,新創公司Vectara就進行了一項研究,以各家廠商推出的AI機器人進行法律方面的測試,Vectara提供了800多份文件給AI,接著要求這些AI依照要求來進行文件的內容摘要,最後將AI生成的結果輸入到自己研發的檢測AI中。
其中,GTP 4與GTP 4 Turbo的正確性為97%、幻覺度3%;GPT 3.5 Turbo的正確性為96.5%、幻覺度3.5%;Meta推出的Llama 2 70B正確性為94.9%、幻覺度5.1%;Llama 2 7B正確性為94.4%、幻覺度5.6%。其餘各家的AI機器人正確度均有90%以上,幻覺率也是10%以下。
但在其中,Google所推出的PalM 2,其正確率為87.9%,幻覺率為12.1%;而PalM 2 Chat的正確率為72.8%,幻覺率為27.2%。
快訊/川普表態了!不反對黃仁勳重返輝達執行長:他已學到教訓
目標價83元!「重電大廠」EPS估看至3.47元 斬獲MDC新訂單、自製設備產線開出雙動能挹注
目標價527元!「記憶體大廠」今年EPS預估大賺76元 DRAM明年Q1再漲4成毛利率續飆80%
快訊/今彩539頭獎槓龜!800萬錢錢飛了 3星彩、4星彩幸運號碼一次看
目標價455元!「AI伺服器廠」EPS放眼至4股本 VR200機櫃第4季起出貨、明年伺服器占比有望衝破8成
快訊/美股開盤跌一片!那指跌逾300點、英特爾殺逾5%、台積電ADR跌近4% 台股明天恐再迎震盪
Q3毛利率衝31.6%!台玻慘陷跌停仍獲自營商力挺逾4億奪買超王 「這檔金融」前10月獲利報喜同步入榜
AI浪潮助攻!「這檔玻璃大廠」9月稅後獲利11.7億、年增28750% 上周連日紅今慘摔跌停
轉型效益逐步發酵!「橡膠大廠」前三季獲利暴增逾10倍、EPS達2.52元 八大公股卻提款約5千萬元
目標價上看1450元!「這PCB大廠」EPS狂賺12.24元創新高 10月營收暴增76%、法人喊買進
「電子代工大廠」連跌5天慘摔22.66%、淪弱勢股王!前三季獲利卻創歷史新高 明年AI伺服器業務看旺
AI晶片需求強勁!世芯10月營收暴增515%、EPS衝10.11元 創意獲利翻倍
「這檔飆股」90天狂漲324% 被盯上!台股新增2檔處置股 明天起關到11/23
玻纖布慘兮兮!「這檔」連5漲47.2%後慘崩跌停 南亞、德宏、建榮也都亮綠燈
黃仁勳瞞婚外情13個月!《紐時》揭女兒曾指揮公關反擊 法務長登門才認了
三大法人單日狂砍1140億!中鋼遭提款近13億淪賣超王 「這檔」拚ASIC AI布局仍遭下修目標價入列
快訊/股價跌停狂瀉「一張慘賠42萬」!台光電急發重訊:輝達營收占比不到2成
目標價3330元!「矽智財大廠」Q3獲利6.39億元創新高 PUF安全IP年增213%
快訊/財神爺撒錢啦!威力彩2億頭獎號碼揭曉 開獎數字看這邊
柯文哲二審否認侵占政治獻金!怒批「要把我汙名化、關到死」:蔡英文、賴清德1萬元便當就合理?
您已閒置超過五分鐘,請點擊右上角關閉按鈕