柚子快報邀請碼778899分享:試用文心一言
柚子快報邀請碼778899分享:試用文心一言
1 入口
https://yiyan.baidu.com/
2 界面
2.1 整體界面
目標:作為普通用戶使用。結果:整體設計很好,各種角色和提示詞,界面也好看,細節(jié)到位。
3 模型效果
3.1 寫一段微信小程序
目標:對于本土化的工具,國外文本生成支持不是很好。結果:看著還不錯,還沒試運行。
3.2 當朋友聊天我會找誰
目標:討論一些人文問題,提出一些之前和 ChatGPT 聊到的問題,對比答案。結果:答案也大差不差,呵呵…… 相對 ChatGPT,我覺得 ERNIE 比較教條,調性不太一樣。
3.3 業(yè)務能力
目標:具體業(yè)務的能力。結果:測試了一下總結長文的能力,理解能力可用。
4 易用性
4.1 申請 API
目標:真正解決問題,還是需要使用 API。結果:230831 早上 3:00 申請,10:13 收到短信,通過審核。
4.2 費用
目標:看看用哪個更劃算結果:差不多
文心一言:ERNIE-Bot-turbo 0.008元/千tokensChatGPT:0.002美元/千tokens 評論: 千帆支持多個模型,有ERNIE的,也有LAMMA,不同模型計費方式不同,可對比不同模型效果;這里更像是個集成平臺,而非完全是百度的大語言模型。
4.3 反饋時間
目標:評測反饋時間結果:
問了第一個問題(demo代碼中的默認問題)反饋時間 1s問第二個問題時,提示:Open api daily request limit reached開通了 ERNIE-Bot-turbo 后可正常使用客服說送了 20 代金券,但我沒找到在哪兒重復兩次問了一個 800 字的問題,API 反饋時間 3-3.5s(同一問題,ChatGPT網頁版回答4s左右)
4.4 長度限制
目標:評測其長度限制結果:
我向它提問:“ERNIE-Bot-turbo 每次提問 token 的長度限制是多少”,回答:“ERNIE-Bot-turbo 每次提問的 token 的長度限制是64個字符”,這明顯是不對的。我在文檔里也沒找到,重要參數是不是應該寫在比較顯眼的地方。
4.5 學習成本
目標:評價學習成本結果:
調用 http 請求,不需要額外安裝 Python 包可能是出于安全考慮,需要先獲得 access_tokenPython代碼量不大,學習成本不高 相關文檔:https://cloud.baidu.com/doc/WENXINWORKSHOP/s/4lilb2lpf
5 整體感受
至少不用 xx 上網中文內容支持更好一些客服打電話,加微信,問公司信息,又無法回答技術問題,推銷感讓人覺得有點……我自已用,還是優(yōu)先 ChatGPT;公司用的,需要正規(guī)的渠道,文心一言會比較合適。
6 關于評測
大家都不開源,偏重又不一樣,普通用戶僅僅問幾個問題,也評測不出啥效果,只能收集一些大概的感覺。比如,單位用會考慮:是否可用,是否有明顯問題;自己常用的領域,支持地好不好;提問和回答的限制價格;自己用可能會考慮:思維的廣度,世界觀。
柚子快報邀請碼778899分享:試用文心一言
精彩鏈接
本文內容根據網絡資料整理,出于傳遞更多信息之目的,不代表金鑰匙跨境贊同其觀點和立場。
轉載請注明,如有侵權,聯(lián)系刪除。