關于“文心一言”測試的體驗:快看
2023-03-21 18:29:17 來源:雪球網 小 中
今天用測試賬號,做了一下“文心一言”的測試體驗,整體感覺比較一般,跟當前“天貓精靈”、Siri等相比,沒有顯著的提升,尚談不上AI,更像是一個智能客服。
結果,找出的是一堆字面意義上的“春天”和“冬天”,并沒有真正理解這句詩的涵義。
追問了一下“這句詩實際上表達的是,最困難的時期都已經在經歷了,充滿希望的明天即將到來的意思。請按這個意思找出類似含義的詩句”,結果給出的答案仍然不盡如人意。
【資料圖】
按理說,雪萊的這句名言,人盡皆知,理解這樣的一句話難度應該不大,完全可以第一時間找出諸如“山重水復疑無路,柳暗花明又一村”、“殘雪暗隨冰筍滴,新春偷向柳梢歸”這樣的句子,但其第一時間找的卻是冬天和春天純粹字面的涵義。
這個語義理解還是不盡如人意。
問了一個很簡單的問題“小東爸爸現在年齡是小東的6倍,再過16年后,小東爸爸年齡是小東的2倍,請問現在小東和小東爸爸各多少歲”
第一次給出的答案是錯的,也沒有解答過程。
第二次,按要求給出了解答過程,但仍然是錯誤的
第三次提示了它的錯誤,但最終結果仍然不準確。
這個鑒于百度這么強大的中文搜索功能,以及如此眾多的語料資源,對于中文的表達習慣應該是非常拿手的。但測試結果仍然不盡如人意。
提了一個簡單問題“請問下面這句話“你真是一個善良愛可的人女,真讓人著迷。我已經不自覺的上愛你了”,在表達上有幾處錯誤,請分別指出來”
上面這句話,很簡單的幾個語序的錯誤,如“愛可”、“人女”、“上愛”,其并沒有表達出來。但有一點,確實和很多人所說的那樣,在中文世界里,詞語的前后順序,確實不會影響理解。文心一言對這句話的理解倒是對的。
這個文心一言算是做的很到位了。
這邊提的三個問題,其實一點不敏感,但可能第一個問題提到了敏感人物,結果直接就不回答了。
假如我一開始就問“明天我要會見一下我的一個重要客戶,請幫我安排一下行程”,估計其實會回答的。
這個有點類似圖靈測試,就是想看看是否具備人類情感的屬性,顯然,對于問題的回答,其并沒有達到類似人的要求。
問題:“老婆問老公,如果親我一口,給你1萬元;如果親世界上最美的女人,給你10萬元,那你選擇親誰?請問老公該怎么回答”
這個網上各種搞笑的圖片很多,問了一個問題“請畫一幅牛逼轟轟的人的肖像”,答案也是一如既往的搞笑。
還有更多搞笑的
這說明,文心一言目前達到AIGC,只是簡單的字面意思圖片的堆疊,核心點還是在于語義理解還是存在巨大的差距。
其他還問了十幾個問題,回答大同小異。給人總體的感覺,仍然是其理解主要是停留在表面涵義,并沒有結合語境、結合整句話的意思來理解語義,按理說百度有如此之多的語料,做到這個層次,個人認為并沒有達到預期。
希望百度繼續努力吧
關鍵詞:
相關文章
- 關于“文心一言”測試的體驗:快看
- 火電的春天真的快到了_每日熱文
- 山東濰坊:2021年5月31日后依法生育的三孩免費讀公辦高中
- 天源環保:簽訂4500萬元日常經營合同
- 環球速遞!機構:Q2面板驅動IC價格有望逐漸回穩
- 南亞新材跌1.64% 2020年上市即巔峰超募8.7億元_全球即時
- 實時焦點:一種不祥的預感!急跌可能真要來了!
- 大反攻!創指終結10連跌,醫療絕地反擊,醫療ETF(512170)漲3.35%創近5個月最大單日升幅!:天天快消息
- 安心持有海控就是了 天天新要聞
- 環球短訊!理財日記第1080天(3.21):①“休閑的”511880&“愜意的”懶人網格
- 興源環境:興源控股擬協議轉讓公司10.17%股份
- 新余國科:2022年凈利潤6639萬元 同比增6.84%
- 環球熱頭條丨通威股份:謝毅辭去董事長、CEO等職務
- 捷強裝備:股東擬減持公司不超3.08%股份
- 大商所:生豬期貨合約投機交易保證金水平由15%調整為12%_焦點快報
- 環球熱文:從古北水鎮看文旅產業的投資價值
- 不要被輿論引導著你的投資
- 中煤華晉王家嶺煤礦煤質分析
- 巨星科技:實控人增持231.88萬股公司股份
- 蔡英文將過境紐約和洛杉磯并見麥卡錫?外交部:已向美方嚴正交涉
- 特斯拉2月歐盟銷量飆升50% 純電市占率接近20%:熱議
- 外媒:生成式AI的下一個前沿領域是視頻!:頭條焦點
- 國家能源局:截至2月底全國累計發電裝機容量約26.0億千瓦 同比增長8.5%
- 阿里VP賈揚清被曝將離職創業:建大模型基礎設施,已火速鎖定首輪融資
- 天天關注:東華能源5000萬于廣州新設供應鏈子公司
- 每日播報!半導體板塊走弱 芯原股份跌超6%
- 【天天新要聞】四川:力爭2027年消費市場規模突破4萬億元
- 津膜科技與興蓉環境簽署戰略合作協議
- 上海機場:3月26日虹橋機場將恢復國際、港澳臺航線:今日熱搜
- 東方財富交易軟件午后再次無法登陸交易
熱文推薦
排行推薦

環球速遞!機構:Q2面板驅動IC價格有望逐漸回穩

南亞新材跌1.64% 2020年上市即巔峰超募8.7億元_全球即時

實時焦點:一種不祥的預感!急跌可能真要來了!
