就在剛剛，英偉達(dá)再一次證明了自己的AI創(chuàng)新領(lǐng)域的領(lǐng)導(dǎo)地位。它全新發(fā)布的Nemotron4340B，是一系列具有開(kāi)創(chuàng)意義的開(kāi)源模型，有可能徹底改變訓(xùn)練LLM的合成數(shù)據(jù)生成方式！論文地址：https:d1qx31qr3h6wln.cloudfront.netpublicationsNemotron4340B8T0.pdf這一突破性進(jìn)展，標(biāo)志著AI行業(yè)的一個(gè)重要里程碑——從此，各行各業(yè)都無(wú)需依賴(lài)大量昂貴的真實(shí)世界數(shù)據(jù)集了，用合成數(shù)據(jù)，就可以創(chuàng)建性能強(qiáng)大的特定領(lǐng)域大語(yǔ)言模型！現(xiàn)在，Nemotr...

1.DRRAG有多厲害？圖片圖片上面兩個(gè)表分別展示了DRRAG與其他幾個(gè)當(dāng)前流行的RAG框架對(duì)比的效果，特別是AdaptiveRAG?？梢钥吹?，在多個(gè)測(cè)試數(shù)據(jù)集上，DRRAG要比其他框架（比如：AdaptiveRAG和SelfRAG）準(zhǔn)確率都要更高。而且在相同TopK參數(shù)的前提下，DRRAG的召回率更高，從而回答正確的比例也越高。圖片上面這個(gè)圖展示了DRRAG與AdaptiveRAG對(duì)比的一些例子，從例子里可以看出，DRRAG在一些問(wèn)題上，比AdaptiveRAG回答的更準(zhǔn)確。圖片...

一直以來(lái)，對(duì)LLM的支持觀點(diǎn)之一，就是模型可以集成海量事實(shí)知識(shí)，作為通往「世界模擬器」的基礎(chǔ)。雖然也有不少人提出反對(duì)，但沒(méi)有真憑實(shí)據(jù)。那么，LLM可以作為世界模擬器嗎？最近，亞利桑那大學(xué)、微軟、霍普金斯大學(xué)等機(jī)構(gòu)聯(lián)合發(fā)布了一篇論文，從實(shí)證的角度得出了否定的結(jié)論。最新研究已被ACL2024頂會(huì)接收。論文地址：??https:arxiv.orgpdf2406.06485??研究發(fā)現(xiàn)，GPT4在模擬基于常識(shí)任務(wù)的狀態(tài)變化時(shí)，比如燒開(kāi)水，準(zhǔn)確度僅...

PopAi、Beautiful.ai、Decktopus、Tome和Plus.ai是用于在線創(chuàng)建PowerPoint演示文稿的幾個(gè)推薦的AI工具。?微軟推出了Copilot，將其集成到Microsoft365中，為用戶(hù)提供更多的幫助，并通過(guò)自然語(yǔ)言處理增強(qiáng)可訪問(wèn)性。Copilot現(xiàn)在整合在熟悉的Office套件應(yīng)用程序中，比如Word、Excel、PowerPoint、Outlook和Teams。尤其是對(duì)PowerPoint而言，Copilot充當(dāng)了AI助手的角色，可以將想法輕松轉(zhuǎn)化為精美的幻燈片，簡(jiǎn)化了演示文稿的創(chuàng)建。它...

編輯伊風(fēng)出品51CTO技術(shù)棧（微信號(hào)：blog51cto）周鴻祎的"局部重繪"不僅狠狠被嘲，更是惹上了一身官司！被盜圖的創(chuàng)作者直接喊話(huà)“掃射”：你們AI圈這么無(wú)聊嗎？這還要從6月6日，端午節(jié)放假前夕說(shuō)起。360組織了一場(chǎng)AI新品發(fā)布暨開(kāi)發(fā)者溝通會(huì)，并且高調(diào)發(fā)布了360AI甄選平臺(tái)。但真正惹來(lái)大麻煩的，其實(shí)只是360AI瀏覽器的一個(gè)小功能——圖片處理中的"局部重繪"。在演示過(guò)程中，周鴻祎以"性感"為提示詞，對(duì)一張女性古裝寫(xiě)真圖片進(jìn)行了...

開(kāi)始使用UdioUdio是一款位于人工智能驅(qū)動(dòng)音樂(lè)制作前沿的創(chuàng)新平臺(tái)，正在改變音樂(lè)的創(chuàng)作、分享和體驗(yàn)方式。用戶(hù)只需注冊(cè)并瀏覽其用戶(hù)友好的界面，該界面旨在引導(dǎo)新手和專(zhuān)業(yè)人士完成音樂(lè)創(chuàng)作過(guò)程。該平臺(tái)允許用戶(hù)快速登錄，通常使用現(xiàn)有的Google賬戶(hù)（我偏愛(ài)的方法），從而無(wú)縫進(jìn)入AI音樂(lè)的世界。打造您的第一首AI歌曲使用Udio創(chuàng)作音樂(lè)是簡(jiǎn)單與復(fù)雜的融合。用戶(hù)可以從選擇流派或情緒開(kāi)始，然后轉(zhuǎn)到使用提示欄，他們可以輸入對(duì)歌曲...

想象一下，在幾秒鐘內(nèi)就能創(chuàng)作出一首完整、專(zhuān)業(yè)聽(tīng)起來(lái)的歌曲。不需要多年磨練音樂(lè)技藝，也不需要掌握復(fù)雜的音樂(lè)制作軟件——只需要用幾個(gè)詞描述你的想法。這就是SunoAI提供的東西，這是一款開(kāi)創(chuàng)性的平臺(tái)，利用人工智能的力量來(lái)民主化音樂(lè)創(chuàng)作，特別是它的最新音樂(lè)生成器版本：Sunov3！釋放創(chuàng)造力：SunoAI如何生成音樂(lè)Suno就像一個(gè)黑匣子：一個(gè)被神秘籠罩的文本到音樂(lè)的生成器……不是開(kāi)源的。用戶(hù)輸入關(guān)鍵詞或簡(jiǎn)要描述，然后就...

TheAnnotatedTransformer這篇文章從零復(fù)現(xiàn)了2017年那篇Transformer論文，TheAnnotatedTransformer注釋加量版在此基礎(chǔ)上追加注釋和輸出數(shù)據(jù)維度信息進(jìn)一步揭開(kāi)Transformer的一些細(xì)節(jié)，原始Transformer是一個(gè)EncoderDecoder架構(gòu)的模型，今天我將用同樣的方法繼續(xù)學(xué)習(xí)GPT系列模型中最簡(jiǎn)單的GPT2，GPT是Decoderonly架構(gòu)模型，所以，我們只需要關(guān)注Transformer的右側(cè)部分。由于代碼過(guò)長(zhǎng)，所以沒(méi)有把全部代碼拷貝過(guò)來(lái)，建議打開(kāi)下面代...

編輯星璇出品51CTO技術(shù)棧（微信號(hào)：blog51cto）如果問(wèn)，哪類(lèi)開(kāi)發(fā)者更適合探索人工智能如何為其工具增添價(jià)值，那么一定是前端程序員?？捎^測(cè)性平臺(tái)Honeycomb的工程副總裁Nakashima非常篤定這一點(diǎn)。1.AI更適合前端開(kāi)發(fā)者“前端生態(tài)系統(tǒng)發(fā)展得如此之快，從某種程度上講，前端工程師比其他任何人都更擅長(zhǎng)將AI引入他們的工具集，因?yàn)樗麄兞?xí)慣于掌握新工具，并弄清楚如何整合和使用這些工具來(lái)匯集所有不同工作流程的精華，”Nakashima...

看到標(biāo)題，很多專(zhuān)家可能馬上想來(lái)爭(zhēng)辯，別急，本文我們一步步推演。首先訂正一個(gè)詞：AGI,國(guó)外稱(chēng)ArtificialGeneralIntelligence，國(guó)內(nèi)譯作通用人工智能GeneralArtificialIntelligence,看似很小的一個(gè)順序差異，實(shí)則謬以千里，大家多讀英文幾遍仔細(xì)體會(huì)。生命是什么薛定諤在1944年出版的書(shū)《WhatisLife》中闡述了他對(duì)生命的觀點(diǎn)，生命是由負(fù)熵喂養(yǎng)大的，后來(lái)更正為，自由能才是生命的源泉。薛定諤眼里的生命就是一團(tuán)活生生的自由能...

年初Sora的發(fā)布，AI圈就掀起了一場(chǎng)大討論，許多人都在喊顛覆世界，直呼真實(shí)世界要不存在了。這張圖片讓我影響深刻，當(dāng)時(shí)的Sora完全吊打同時(shí)期的其他AI視頻工具。然而隨著時(shí)間的推移，其他公司也不甘示弱，紛紛推出了自己的AI工具，如快手的可靈得和Luma的最新AI工具，它們?cè)谏尚Ч喜惠擲ora，甚至在某些方面超越了它。今天對(duì)AI圈來(lái)說(shuō)又是一場(chǎng)地震，在AI音樂(lè)、AI繪畫(huà)、AI視頻、AI原型圖等都有重大更新，簡(jiǎn)直像過(guò)年一樣。上周...

過(guò)去一年，大模型應(yīng)用以前所未有之勢(shì)從出現(xiàn)到繁榮。LLM應(yīng)用從原型展示向生產(chǎn)落地演進(jìn)。近日，Oreilly刊發(fā)了由EugeneYan,BryanBischof等人撰寫(xiě)的大模型總結(jié)性文章《WhatWeLearnedfromaYearofBuildingwithLLMs？》，由于作者們背景各不相同，有獨(dú)立咨詢(xún)顧問(wèn)（HamelHusain，JasonLiu），有研究人員（ShreyaShankar），還有科技公司AI團(tuán)隊(duì)領(lǐng)袖（EugeneYan，BryanBischof），以及AI領(lǐng)域布道師（CharlesFrye），這使得文章內(nèi)容更為全...

論文鏈接:https:arxiv.orgabs2406.04271代碼鏈接:https:github.comYangLing0818bufferofthoughtllm近年來(lái)，大語(yǔ)言模型（LLMs）如GPT4、PaLM和LLaMA在各種推理任務(wù)中展現(xiàn)了驚人的性能。然而，盡管這些模型在規(guī)模和性能上不斷提升，它們?cè)谔幚韽?fù)雜推理任務(wù)時(shí)仍面臨一定的挑戰(zhàn)。為了解決這些問(wèn)題，我們提出了一種名為BufferofThoughts（BoT）的新型思維增強(qiáng)推理框架。BoT的核心在于引入一個(gè)輕量級(jí)的metabuffer，其中存儲(chǔ)了一系列從...

文章鏈接：https:arxiv.orgpdf2406.07540項(xiàng)目鏈接：https:genforce.github.ioctrlx最近的可控生成方法，如FreeControl和DiffusionSelfguidance，為文本到圖像（T2I）擴(kuò)散模型帶來(lái)了細(xì)粒度的空間和外觀控制，而無(wú)需訓(xùn)練輔助模塊。然而，這些方法針對(duì)每種類(lèi)型的評(píng)分函數(shù)優(yōu)化潛在embedding，并采用較長(zhǎng)的擴(kuò)散步驟，使生成過(guò)程耗時(shí)且限制了它們的靈活性和使用。本文提出了CtrlX，這是一個(gè)簡(jiǎn)單的T2I擴(kuò)散控制結(jié)構(gòu)和外觀的框架，無(wú)需額...

本文介紹了兩種無(wú)需編寫(xiě)代碼即可設(shè)置開(kāi)源LLMAPI服務(wù)器的解決方案。近幾個(gè)月來(lái)，開(kāi)源的大型語(yǔ)言模型一直在迅速發(fā)展。Meta公司發(fā)布了LLaMA，隨后又發(fā)布了一系列其他模型，這導(dǎo)致很多企業(yè)運(yùn)行自己的LLM的興趣激增。擁有自己的LLM(例如LLaMA2)提供了一些優(yōu)勢(shì)：企業(yè)可以更好地控制大型語(yǔ)言模型的使用，確保數(shù)據(jù)的隱私，允許定制以適應(yīng)特定需求，并促進(jìn)與現(xiàn)有系統(tǒng)的無(wú)縫集成。然而，企業(yè)運(yùn)行自己的LLM也有許多挑戰(zhàn)，其中包括設(shè)置必要...

?編輯伊風(fēng)?出品51CTO技術(shù)棧（微信號(hào)：blog51cto）?蘋(píng)果再度登頂！雖然WWDC之后，蘋(píng)果的股價(jià)出現(xiàn)了頹勢(shì)。但其后兩天，蘋(píng)果的股價(jià)不負(fù)眾望，一路上漲，市值超過(guò)了3.2萬(wàn)億美元。蘋(píng)果越過(guò)了競(jìng)爭(zhēng)對(duì)手微軟和英偉達(dá)，重新奪回了全球市值第一的寶座。股價(jià)的走高當(dāng)然得益于蘋(píng)果在AI的全面布局。蘋(píng)果終于放下身段，談?wù)撈饡r(shí)下風(fēng)頭正盛的AI,甚至發(fā)布了名為“AppleIntelligence”的個(gè)人智能系統(tǒng)，并且與一直站在風(fēng)口浪尖之上的OpenAI宣布...

出品51CTO技術(shù)棧（微信號(hào)：blog51cto）短視頻賽道的戰(zhàn)火已經(jīng)徹底卷起來(lái)了，今天，一款讓全球網(wǎng)友興奮到刷屏的視頻生成器上線了！DreamMachine，這款可以根據(jù)文本和圖像生成AI視頻的工具向公眾開(kāi)放，免費(fèi)，免費(fèi)，免費(fèi)！關(guān)鍵還在于，跟傳說(shuō)中的Sora技術(shù)路線大不相同，2分鐘內(nèi)就能生成！話(huà)不多說(shuō)，在解讀技術(shù)之前，先看效果（什么才是真正的饕餮盛宴）！1.大片預(yù)告—Justin有人搶先體驗(yàn)了DreamMachine的人甚至生成了非常震撼預(yù)告片...

視頻生成領(lǐng)域，又添一員猛將！就在今天，LumaAI首發(fā)了自己的視頻生成模型DreamMachine，可以通過(guò)文字或圖片生成高質(zhì)量的逼真視頻。更重要的是，API對(duì)全球免費(fèi)開(kāi)放！進(jìn)入官網(wǎng)后用谷歌賬號(hào)登錄即可馬上試用。每個(gè)用戶(hù)每月有30次免費(fèi)生成的額度，但比較遺憾的是，每條視頻時(shí)長(zhǎng)只有5秒。免費(fèi)試用的消息一出，熱情的網(wǎng)友們紛紛擠入服務(wù)器，結(jié)果發(fā)現(xiàn)LumaAI囤的算力好像不夠，于是開(kāi)始了一場(chǎng)漫長(zhǎng)的等待。剛發(fā)布后，有些人等了2個(gè)小時(shí)還...

本文是在TheAnnotatedTransformer這篇文章基礎(chǔ)上的二次加工。1.給代碼加了更詳細(xì)的注釋。2.輸出詳細(xì)日志跟蹤數(shù)據(jù)。原文地址：https:nlp.seas.harvard.eduannotatedtransformer或者后臺(tái)回復(fù)taf獲取pdf下載鏈接。TheAndnotatedTransformerAttentionisAllYouNeedv2022:AustinHuang,SurajSubramanian,JonathanSum,KhalidAlmubarak,andStellaBiderman.Original:SashaRush閱讀方法由于原文內(nèi)容過(guò)長(zhǎng)，我沒(méi)有把原文拷貝過(guò)來(lái)，閱讀本文時(shí)...

1.背景信息抽?。↖nformationExtraction，IE）一般包括命名實(shí)體識(shí)別（NamedEntityRecognition，NER）、關(guān)系抽?。≧elationExtraction，RE）和事件抽?。‥ventExtraction，EE）。NER作為基礎(chǔ)任務(wù)，專(zhuān)注于識(shí)別并分類(lèi)文本中的命名實(shí)體，如人物、組織、地點(diǎn)和日期。RE則致力于發(fā)現(xiàn)實(shí)體間的語(yǔ)義聯(lián)系，比如某人在某地工作或兩人之間的婚姻關(guān)系。EE則關(guān)注于識(shí)別文本中的特定事件及其相關(guān)要素，這些事件是特定時(shí)間、地點(diǎn)下發(fā)生的，涉及...