OpenAI的首席技術官Mira Murati宣布離開公司。Mira曾短暫擔任臨時CEO,對OpenAI有重要貢獻。她的離職意味著OpenAI原“四大天王”只剩Sam Altman。Mira表示離開是為了個人探索,她將確保平穩(wěn)過渡。Mira在OpenAI的工作包括領導ChatGPT、DALL-E等項目,推動AI研究和應用。
OpenAI首席執(zhí)行官Sam Altman討論了AI如何增強人類能力,預測未來將有超級智能。他強調深度學習作為AI技術的核心,以及算力、能源、數(shù)據(jù)和人類意志對開啟智能時代的重要性。Altman認為,智能時代將帶來繁榮,解決氣候問題和太空殖民,但也需注意AI的潛在負面影響。
OpenAI還新增了自定義指令、語音記憶存儲、5種新聲音、語速以及新增了50多種語音(最初是40種),同時支持中文模式。
在行業(yè)競爭優(yōu)勢方面, 37% 的早期生成式AI使用者認為,自己在市場和競爭對手中遙遙領先,而計劃者中這一比例僅為 11%。這表明早期使用者通過積極應用生成式 AI,已經取得了一定的競爭優(yōu)勢,并且相信這種優(yōu)勢將繼續(xù)擴大。
目前,多數(shù)大模型的性能受限于其預訓練階段所獲取的數(shù)據(jù)集,以及推理過程中的算力資源。研究人員發(fā)現(xiàn),可以通過更多的推理時間、自適應(就是草莓的特殊延遲推理)來提升模型的性能,這種技術稱為——測試時計算(Test-time computation)。
OpenAI能拿到的資金上限是115億美元。本次投資者包括微軟、蘋果、英偉達、Thrive Capital等全球知名企業(yè),其估值比上一輪融資提升了1倍左右。
Siri已經集成了OpenAI的ChatGPT(GPT-4o)功能,使其理解、生成、執(zhí)行能力更強,例如,你在計劃一次旅行時,想要了解目的地的景點推薦、美食特色、文化等,Siri 可以通過 ChatGPT 獲取豐富的信息更好的幫助你。
為了解決訓練數(shù)據(jù)短缺和質量差的難題,微軟研究院發(fā)布了一個專門用于生成高質量合成數(shù)據(jù)的的AI Agent——Agent Instruct。
商湯科技等機構聯(lián)合開源了百億級圖文交錯數(shù)據(jù)集OmniCorpus,規(guī)模是現(xiàn)有數(shù)據(jù)集的15倍,包含86億張圖像和16,960億個文本標記。OmniCorpus數(shù)據(jù)集在多語言、多類型數(shù)據(jù)抓取上進行了優(yōu)化,提高了內容提取的質量和完整性。通過人工反饋和自動過濾規(guī)則,確保了數(shù)據(jù)集的高質量。在VQA和Image Captioning等測試中,基于OmniCorpus預訓練的模型表現(xiàn)出色,對訓練多模態(tài)大模型有重要幫助。
OpenAI正在進行數(shù)十億美元融資,估值超過1000億美元,由Thrive Capital領投,微軟參與。資金將支持AI算力和日常運營。自發(fā)布ChatGPT以來,OpenAI估值飆升,但財務狀況緊張,因為開發(fā)多個大模型如GPT-4和Sora等,導致巨大的算力和資源消耗。面對激烈的市場競爭,OpenAI急需資金支持以維持運營和開發(fā)新產品。
文生圖片開源領域就殺出了一匹大黑馬—FLUX.1。性能大幅度超過了DALL·E-3、Midjourney V6閉源模型,開源SD3系列的Ultra、Medium、Turbo和SDXL被全線秒殺。
aiOla在Whisper的架構之上進行了修改采用了“多頭注意力”機制的并行計算方法,允許模型在每個推理步驟中預測多個token,同時不會損失性能和識別準確率。
這個模型一般的GPU肯定是跑不起來,如此大的參數(shù)在部署方面?zhèn)人開發(fā)者也負擔不起(如果你有一些H100也沒問題),估計是給企業(yè)、政務公共部門用的。對于Meta即將發(fā)布的模型,就有網(wǎng)友潑冷水。相比OpenAI最新的GPT-4o mini版本,Llama 3.1-70B推理成本提升了3倍,但編碼的性能卻要差很多。
Numina一路披荊斬棘、過關斬將,在50道超難的數(shù)學競賽題中,其AI模型回答對了29道比第二名多出7道順利拿下第一名。
中國憑借龐大的“原生數(shù)字人口”以及健康、積極的創(chuàng)新技術生態(tài),在生成式AI產品場景化落地和應用方面領先美國、英國、日本等發(fā)達國家。
球申請生成式AI專利前10位分別是:騰訊、平安保險、百度、中國科學院、IBM、阿里巴巴、三星電子、Alphabet(谷歌母公司)、字節(jié)跳動和微軟。(排名按照專利數(shù)量)
Gen-3 Alpha是Runway在本月17日最新推出的產品,與上一代相比,光影、質量、構圖、文本語義還原、物理模擬、動作一致性/連貫性等方面實現(xiàn)大幅度提升,劍指OpenAI的Sora。
全球著名開源平臺huggingface的聯(lián)合創(chuàng)始人宣布,阿里開源的Qwen2-72B指令微調版本成為開源模型排行榜第一名。使用300塊H100對全球100多個主流開源大模型進行評估,結果顯示,Qwen-2 72B力壓其他模型,中國在全球開源大模型領域處于領導地位。StabilityAI的研究總監(jiān)Tanishq認為,中國在開源大模型領域非常有競爭力,期待阿里發(fā)布更多高性能的開源大模型。
與以往模型不同的是,CriticGPT是一款面向開發(fā)人員的產品,可以增強RLHF(人類反饋強化學習)的效率培育出質量更好的訓練數(shù)據(jù)。