首個(gè)AI中文模型產(chǎn)品測(cè)評(píng)基準(zhǔn)SuperCLUE發(fā)布丨DALL·E 3上線ChatGPT丨Midjourney發(fā)布動(dòng)漫生成APP
AI奇點(diǎn)網(wǎng)2023年10月20日?qǐng)?bào)道丨AI資訊早報(bào)
斯坦福大學(xué)推出大模型透明度測(cè)評(píng):GPT-4僅排第三
今天,斯坦福大學(xué)基礎(chǔ)模型研究中心(CRFM)聯(lián)合斯坦福以人為本AI研究所(HAI)、麻省理工學(xué)院媒體實(shí)驗(yàn)室、普林斯頓大學(xué)信息技術(shù)中心共同發(fā)布了2023基礎(chǔ)模型透明度指數(shù)(Foundation Model Transparency Index,F(xiàn)MTI),并對(duì)10個(gè)主流基礎(chǔ)模型進(jìn)行了透明度評(píng)級(jí)。
評(píng)級(jí)結(jié)果表明,即使是得分最高的Meta Llama2也僅在滿分100分中獲得54分,OpenAI的GPT-4獲得48分,排名第三。10個(gè)基礎(chǔ)模型的平均得分僅為37分。
Midjourney發(fā)布動(dòng)漫風(fēng)格AI繪圖生成器Niji-Journey APP
當(dāng)?shù)貢r(shí)間10月16日,Midjourney創(chuàng)始人David Holz介紹稱,Midjourney與日本游戲公司Sizigi Studios的工程師合作發(fā)行了一款A(yù)ndroid和iOS應(yīng)用Niji-Journey,主要提供使用Midjourney動(dòng)漫風(fēng)格設(shè)置的圖像。
該應(yīng)用程序需要付費(fèi)才能使用,支持20次免費(fèi)試用,全年一次性支付96美元,或者每月支付10美元。現(xiàn)有的Midjourney用戶可以使用他們的Discord憑據(jù)登錄,而無需支付更多費(fèi)用。
首個(gè)AI中文模型產(chǎn)品測(cè)評(píng)基準(zhǔn)SuperCLUE發(fā)布
據(jù)CLUE中文語言理解測(cè)評(píng)基準(zhǔn)評(píng)委會(huì)發(fā)文稱,中文通用大模型綜合性測(cè)評(píng)基準(zhǔn)(SuperCLUE)宣布推出面向AI智能產(chǎn)品的中文測(cè)評(píng)基準(zhǔn)服務(wù)SuperCLUE-Agent。這是一個(gè)聚焦于Agent能力的多維度基準(zhǔn)測(cè)試,包括3大核心能力、10大基礎(chǔ)任務(wù),可以用于評(píng)估大語言模型在核心Agent能力上的表現(xiàn),包括工具使用、任務(wù)規(guī)劃和長短期記憶能力。
經(jīng)過針對(duì)16款支持中文的大語言模型的測(cè)評(píng),SuperCLUE發(fā)現(xiàn):在Agent的核心基礎(chǔ)能力中文任務(wù)上,GPT-4模型大幅領(lǐng)先;同時(shí),代表性國內(nèi)模型,包括開源和閉源模型,已經(jīng)較為接近GPT-3.5水平。
測(cè)評(píng)體系、代表性示例、榜單地址:
www.cluebenchmarks.com/superclue_agent.html
https://github.com/CLUEbenchmark/SuperCLUE-Agent
OpenAI在ChatGPT全面接入DALL·E 3繪圖模型
OpenAI當(dāng)?shù)貢r(shí)間本周四宣布,將向 ChatGPT Plus 和企業(yè)版客戶推出DALL·E 3的服務(wù),并且直接在ChatGPT聊天對(duì)話窗口即可完成圖像生成。
DALL·E 3 在9月底首次發(fā)布,OpenAI 展示了新版本在 DALL·E 2 的基礎(chǔ)上如何進(jìn)行改進(jìn)。用戶在ChatGPT內(nèi)直接輸入任意長度的文字描述,從一句話到一段話都可以,用于描述他們想要的圖像生成作品,然后 DALL·E 3 就會(huì)在幾秒鐘內(nèi)生成圖片。
OpenAI 本周早些時(shí)候還宣布,ChatGPT聯(lián)網(wǎng)通信功能也正式上線,所有 Plus 和企業(yè)訂閱用戶都可以正式使用微軟 Bing 搜索進(jìn)行互聯(lián)網(wǎng)通信瀏覽。
OpenAI CEO:不會(huì)參與智能手機(jī)行業(yè)競爭
AI奇點(diǎn)網(wǎng)從外媒Business Insider獲悉,OpenAI CEO奧特曼在最近《華爾街日?qǐng)?bào)》舉辦的一次活動(dòng)上表示:“我沒有興趣嘗試與智能手機(jī)競爭——它的功能非常出色。”
奧特曼被曝光正與前蘋果設(shè)計(jì)師Jony Ive共同推出一項(xiàng)OpenAI的新產(chǎn)品,但是他拒絕透露產(chǎn)品的形態(tài)。奧特曼表示,現(xiàn)在還只是模糊的初步想法。不過他確定OpenAI不會(huì)推出智能手機(jī),并且認(rèn)為,AI并不會(huì)挑戰(zhàn)目前的手機(jī)行業(yè)格局。
稍早的時(shí)候,英國《金融時(shí)報(bào)》曾爆料稱,OpenAI正與蘋果前設(shè)計(jì)師Jony Ive、日本軟銀進(jìn)行接觸,擬成立一家合資企業(yè)打造“AI領(lǐng)域的iPhone產(chǎn)品”。