標(biāo)簽:上下文
谷歌Gemini 1.5模型來(lái)了!突破100萬(wàn)個(gè)tokens,能處理1小時(shí)視頻【附58頁(yè)技術(shù)報(bào)告】
一次能處理1小時(shí)視頻、11小時(shí)音頻、超過(guò)3萬(wàn)行代碼。 編譯|ZeR0 編輯|漠影 智東西2月16日?qǐng)?bào)道,谷歌昨夜發(fā)布其大模型矩陣的最新力作——Gemini 1.5,并將上下文...
谷歌Gemini1.5重磅上線:最強(qiáng)MoE架構(gòu),100萬(wàn)上下文
文章轉(zhuǎn)載自「機(jī)器之心」今天,谷歌宣布推出 Gemini 1.5。Gemini 1.5 建立在谷歌基礎(chǔ)模型開(kāi)發(fā)和基礎(chǔ)設(shè)施的研究與工程創(chuàng)新的基礎(chǔ)上,包括通過(guò)新的專家混合 (MoE...
谷歌Gemini1.5火速上線:MoE架構(gòu),100萬(wàn)上下文
機(jī)器之心報(bào)道 機(jī)器之心編輯部今天,谷歌宣布推出 Gemini 1.5。 Gemini 1.5 建立在谷歌基礎(chǔ)模型開(kāi)發(fā)和基礎(chǔ)設(shè)施的研究與工程創(chuàng)新的基礎(chǔ)上,包括通過(guò)新的專家混...
谷歌發(fā)布Gemini 1.5,多項(xiàng)指標(biāo)碾壓ChatGPT
點(diǎn)擊上方藍(lán)字關(guān)注我們谷歌發(fā)布了Gemini 1.5,AI模型系列的重大更新,擁有史無(wú)前例的大型上下文長(zhǎng)度。Gemini 1.5采用新的MoE架構(gòu),效率更高。Gemini 1.5 Pro性...
谷歌Gemini 1.5深夜上線,史詩(shī)級(jí)多模態(tài)硬剛GPT-5!最強(qiáng)MoE首破100萬(wàn)極限上下文紀(jì)錄
新智元報(bào)道編輯:好困 Aeneas 【新智元導(dǎo)讀】剛剛,我們經(jīng)歷了LLM劃時(shí)代的一夜。谷歌又在深夜發(fā)炸彈,Gemini Ultra發(fā)布還沒(méi)幾天,Gemini 1.5就來(lái)了。卯足勁和...
陶哲軒看了都直呼內(nèi)行!谷歌等用LLM自動(dòng)證明定理拿頂會(huì)杰出論文,上下文越全證得越好
新智元報(bào)道編輯:alan 【新智元導(dǎo)讀】在軟件工程頂會(huì)ESEC/FSE上,來(lái)自馬薩諸塞大學(xué)、谷歌和伊利諾伊大學(xué)厄巴納-香檳分校(UIUC)的研究人員發(fā)表了新的成果,...
擊敗OpenAI,權(quán)重、數(shù)據(jù)、代碼全開(kāi)源,能完美復(fù)現(xiàn)的嵌入模型Nomic Embed來(lái)了
機(jī)器之心報(bào)道 編輯:陳萍、小舟模型參數(shù)量只有 137M,5 天就能訓(xùn)練好。一周前,OpenAI 給廣大用戶發(fā)放福利,在下場(chǎng)修復(fù) GPT-4 變懶的問(wèn)題后,還順道上新了 5 ...
匿名論文提出奇招!增強(qiáng)大模型長(zhǎng)文本能力居然還能這么做
豐色 發(fā)自 凹非寺量子位 | 公眾號(hào) QbitAI一提到提高大模型長(zhǎng)文本能力,就想到長(zhǎng)度外推或者上下文窗口擴(kuò)展? 不行,這些都太費(fèi)硬件資源了。 來(lái)看一個(gè)奇妙新解...
英偉達(dá)新對(duì)話QA模型準(zhǔn)確度超GPT-4,卻遭吐槽:無(wú)權(quán)重代碼意義不大
機(jī)器之心報(bào)道 編輯:大盤雞、杜偉昨天,Meta、紐約大學(xué)的研究者用「自我獎(jiǎng)勵(lì)方法」,讓大模型自己生成自己的微調(diào)數(shù)據(jù),從而在 Llama 2 70B 的迭代微調(diào)后超越...
大模型筆記!以LLAMA為例,快速入門LLM的推理過(guò)程
直播預(yù)告 | 下周一晚7點(diǎn),「自動(dòng)駕駛新青年講座」第35講正式開(kāi)講,LMDrive一作、香港中文大學(xué)MMLab在讀博士邵昊將主講《LMDrive:大語(yǔ)言模型加持的閉環(huán)端到端...
Stability AI開(kāi)年首個(gè)大模型:專寫代碼,支持18種編程語(yǔ)言,上下文100K,蘋果筆記本離線就能跑
西風(fēng) 發(fā)自 凹非寺量子位 | 公眾號(hào) QbitAIStability AI開(kāi)年第一個(gè)大模型來(lái)了! 名為Stable Code 3B,參數(shù)27億,專為寫代碼而生。 Stable Code 3B可理解處理18...
詳解!大語(yǔ)言模型中的檢索增強(qiáng)生成RAG技術(shù)
直播預(yù)告 | 1月17日晚7點(diǎn),「多模態(tài)大模型線上閉門會(huì)」正式開(kāi)講!阿里巴巴通義實(shí)驗(yàn)室 NLP 高級(jí)算法專家嚴(yán)明參與出品,攜手劉兆洋、李彥瑋、文束三位青年學(xué)者...
港中文在讀博士李彥瑋:LLaMA-VID: 專注于長(zhǎng)視頻理解的視覺(jué)語(yǔ)言大模型
1月17日晚7點(diǎn),智猩猩推出「多模態(tài)大模型線上閉門會(huì)」。本次閉門會(huì)由阿里巴巴通義實(shí)驗(yàn)室 NLP 高級(jí)算法專家嚴(yán)明參與出品,并聚焦于大語(yǔ)言模型工具調(diào)用 Control...
阿里與上交大提出 LLM 長(zhǎng)文本計(jì)算新解法:可處理文本長(zhǎng)達(dá) 1900k 字節(jié)、效率提升 2.4 倍
DistAttention與DistKV-LLM結(jié)合,帶來(lái)云端自然語(yǔ)言處理新變革。編譯 | 郭 思 編輯丨陳彩嫻 在實(shí)際應(yīng)用大模型的過(guò)程中,尤其是處理長(zhǎng)文本的上下文信息時(shí),如何...
開(kāi)發(fā)速率飆升20倍!GPT Pilot明星項(xiàng)目登Github熱榜,從0開(kāi)始構(gòu)建AI
新智元報(bào)道編輯:桃子 【新智元導(dǎo)讀】開(kāi)發(fā)者的效率倍增工具來(lái)了。AI開(kāi)發(fā)者伴侶GPT Pilot可以讓95%的開(kāi)發(fā)者實(shí)現(xiàn)自動(dòng)編碼。又一個(gè)明星項(xiàng)目誕生了! GPT Pilot,...
粵公網(wǎng)安備 44011502001135號(hào)