AI.x社區
- 登錄/注冊
微軟開源視覺語言模型Florence-2的應用實戰
原創本文將通過探討微軟開源Florence2模型的零樣本功能來全面了解其在字幕識別、目標檢測、分割和OCR等領域的應用。簡介近年來，計算機視覺領域見證了基礎模型的興起，這些模型可以在不需要訓練自定義模型的情況下進行圖像注釋。我們已經看到了用于分類的CLIP模型（參考文獻2）、用于對象檢測的GroundingDINO（參考文獻3）和用于分割的SAM（參考文獻4）等模型，每種模型在其各自領域都表現出色。但是，我們是否能夠開發一個能夠同時...Florence-2模型視覺語言模型VLM【AIGC】學習感悟
原創AIGC創新先鋒者征文大賽??【本文正在參與AI.x社區AIGC創新先鋒者征文大賽】?近年來，生成式AI無疑是AI領域最炙手可熱的技術之一。從自動生成文本、圖像，到音樂、視頻等多模態生成，AIGC的應用領域不斷擴大，推動著各行各業的創新。我也學習了一些AIGC方面的一些知識，并產生了濃厚的興趣，也有了一些心得體會。1.AIGC的核心技術生成式AI的核心技術包括生成對抗網絡、自回歸模型以及變分自編碼器等。這些技術為AIGC的創新應...AIGC#AIGC創新先鋒者#AIGC創新先鋒者征文大賽#人工智能在醫療領域的全面應用與未來展望
原創 精華【本文正在參與AI.x社區AIGC創新先鋒者征文大賽】:??【大獎征文】AIGC創新先鋒者征文大賽懸賞召集AI.xAIGC專屬社區51CTO.COM???近年來，人工智能（AI）技術在醫療領域的應用持續擴展，其通過數據處理、機器學習和深度學習等技術，為醫療行業帶來了巨大的變革。AI不僅提高了診斷的準確性，還促進了藥物開發、個性化醫療以及外科手術等多個方面的創新。本文將詳細探討AI在醫療中的主要應用場景、其對醫療行業的深遠影響以及...#AIGC創新先鋒者超強！一區直接寫！基于SSA+Informer-SENet故障診斷模型
1模型創新點介紹1.1時序特征捕捉與建模使用Informer的編碼器層來捕捉長故障信號時序依賴特征長時間序列處理：傳統的RNN和LSTM等方法在處理長時間序列時存在計算效率低、梯度消失等問題。Informer通過改進Transformer架構，使用ProbSparseSelfAttention機制，有效地提高了計算效率，特別是對于長時間序列數據。全局特征提取：通過多頭注意力機制，Informer能夠捕捉序列數據中的全局特征和長時間依賴關系，確保對故障信號的時序特...SSAInformer模型千萬不要為了節約成本而選擇小模型，特別是開源模型
原創?“大模型和小模型是從功能上來區分的，而不是參數上”我們在工作的過程中，應該多多少少都遇到過這樣的事情；那就是老板為了節省成本，然后找了一些不專業或者一些漏洞百出的工具給我們用；最后的結果就是成本沒節約下來，然后還出了一大堆亂七八糟的事。這可真的是羊肉沒吃著，還惹了一身騷；成本沒節約，最后還耽誤時間，身心俱疲。為什么不建議使用小模型？首先聲明一下，這里的小模型不是指參數體量小的模型，是指功能太...模型開源模型o1快慢思考的風又吹到了Agent！
智能體（Agent）通過自然對話與用戶互動有兩個任務：交談和規劃推理。對話回應必須基于所有可用信息，行動必須有助于實現目標。與用戶交談和進行多步推理和規劃之間的二分法，類似卡尼曼引入的人類快速思考和慢速思考系統。為此，GoogleDeepMind提出了一個名為TalkerReasoner的雙系統架構，以模擬人類的兩種思考系統。TalkerReasoner的雙系統架構，用于構建能夠通過自然對話與用戶互動的智能代理。這種架構受到人類“快速思考”...o1Agent系統Ultralytics新作-YOLOv11
?本文介紹視覺目標檢測模型YOLOv11。2024年9月30日，在YOLOVision活動上，Ultralytics團隊正式宣布發布YOLOv11。短短2年，YOLO就從YOLOv8一下子迭代到YOLOv11，可見目前AI的發展速度。感興趣的小伙伴可以看看官方的倉庫：https:github.comultralyticsultralytics模型介紹對比YOLOv8（Ultralytics前一代出品），主要有三個模型結構的變化：C3k2機制。上圖為C3k的網絡結構圖，2是指調用時C3k其中的參數N固定設置為2。不過從結構...YOLOv11視覺目標檢測模型阿里巴巴達摩院、新加坡科技設計大學和南洋理工大學聯合團隊提升AI多步推理能力的新方法
大模型在處理更復雜的問題時，仍然容易在推理過程中出現錯誤，導致推理路徑偏離，最終影響模型的整體性能。現有的大語言模型在多步推理任務中，通常會由于推理路徑中某一步驟的錯誤而影響整個推理過程。這些錯誤不僅降低了模型的準確性，還增加了計算成本和執行延遲。傳統的方法如強化學習需要復雜的獎勵模型，而其他偏好優化方法往往忽視了多步推理任務中錯誤發生的具體步驟及其后續分支。為了解決這些問題，阿里巴巴達摩院、...AI多步推理能力基于知識圖譜的LangChain應用實戰
圖檢索增強生成（GraphRAG）正逐漸流行起來，成為傳統向量搜索方法的有力補充。這種方法利用圖數據庫的結構化特性，將數據以節點和關系的形式組織起來，從而增強檢索信息的深度和上下文關聯性。示例知識圖譜圖在表示和存儲多樣化且相互關聯的信息方面具有天然優勢，能夠輕松捕捉不同數據類型間的復雜關系和屬性。而向量數據庫在處理這類結構化信息時則顯得力不從心，它們更擅長通過高維向量處理非結構化數據。在RAG應用中，結合...LangChain知識圖譜圖檢索Kimi 我的神，它終于更新了！這個探索版，有點牛！
最近消失了近一個月，我胡漢三回來了。確實因為工作太忙了，國慶假期也回了趟老家，讓自己好好放松了一個月。現在還真想抽自己，AI領域日新月異，更新的實在是太快了。一個月已然又發生了巨大變化，自己都有些落后了。就在前兩天，kimi在距離上次發布生成PPT功能也已有兩月有余，中間沒有任何更新，這次它帶著探索版歸來了。這兩天體驗了一下，與以往的AI搜索對比，確實更加深入。怎么使用呢？很簡單，只要你在kimi對話框里輸入...Kimi探索版更新KDD'24大廠推薦系統優化工作總結
今天這篇文章給大家介紹幾篇KDD2024中，大廠在推薦系統領域的優化工作，論文來自愛彼迎、騰訊、快手、美團等公司，設計多目標建模、多樣性、搜索意圖建模、rankingloss等問題。1.愛彼迎：多目標建模和模型蒸餾論文標題：MultiobjectiveLearningtoRankbyModelDistillation下載地址：https:arxiv.orgpdf2407.07181多目標建模轉換成模型蒸餾問題。多目標的場景要求最小化一個目標的預測誤差，同時其他目標的預估誤差在一個約束內。...推薦系統優化Mistral AI 發布革命性邊緣模型 Ministral 3B 和8B：性能與隱私雙料俱佳
近日，MistralAI發布了兩款新型邊緣模型——Ministral3B和Ministral8B，引發了科技界的廣泛關注。這兩款模型不僅在性能上表現出色，更在隱私保護方面獨具優勢。圖片性能卓越，隱私優先Ministral3B和8B專為設備端計算設計，能夠處理長達128k的文本信息。特別是Ministral8B，采用了創新的滑動窗口注意力機制，顯著提升了運算速度和內存效率。此外，這兩款模型均以隱私保護為設計核心，確保數據在本地處理，降低數據泄露風險。多場...AIMinistral性能不用羨慕Mac用戶！ChatGPT Windows版本開放了！OpenAI能成為王牌級辦公套件嗎？
原創OpenAI又又又搞了點花活！此前macOS系統才有的桌面應用，終于登陸Windows了！主打一個Alt+Space快捷拉取，更快人一步地向GPT提問。圖片雖然，目前都是充值玩家（ChatGPTPlus、Enterprise、Team和Edu用戶）才可以測試。但他們也承諾說，以后會開放給全部用戶體驗。圖片想要一手體驗的朋友，現在可以移步MicrosoftStore下載Windows應用程序。圖片下載地址：https:www.microsoft.comstoreapps9NT1R1C2HH7J我們發現，ChatGPT桌面版...MacChatGPTWindows阿里商業級視頻生成框架——軌跡控制版視頻生成 Tora 重磅開源！
論文鏈接：https:arxiv.orgpdf2407.21705項目鏈接：https:alivideoai.github.iotoravideo代碼鏈接：https:github.comalibabaTora阿里團隊最近在GitHub上推出了其創新的文生視頻生成工具——Tora，為學術界和開源社區提供了新的研究資源。Tora基于先進的DiT框架，專注于軌跡控制的視頻生成。此次開源的版本包括了完整的推理代碼和模型權重，旨在為研究人員和開發者提供高效的工具，促進技術交流與學習。從GitHub上的README文件來...模型框架豐田、波士頓動力聯手開發，實體大型行為模型機器人
豐田在官網宣布與波士頓動力聯合開發實體大型行為模型（LBM）機器人，以加速Atlas的通用能力和商業化場景。LBM的運行模式與ChatGPT等大模型類似，但LBM不能生成文本、圖片等，而是幫助實體機器人能夠通過觀察人類行為來學習各種物理任務，例如，炒菜、做飯、照顧老人等。豐田希望將自己的LBM技術與波士頓動力的招牌機器人Atlas相結合，將很多不可能、電影中的場景實現。豐田自研的LBM技術通過分析大量的人類互動數據，使機器人...波士頓機器人剛剛，OpenAI開放ChatGPT Windows版本，可像Office那樣使用了
精華今天凌晨OpenAI宣布向所有ChatGPTPlus、Enterprise、Team和Edu用戶，提供Windows桌面應用早期版本。用戶可在微軟的應用商店中下載，安裝完成后通過Alt+Space快捷鍵就能迅速啟用，提供文件分析、搜索對話、文本生成等功能，使用體驗相當絲滑和Office一樣。目前，OpenAI已經開放了Mac、Windows兩大操作系統的桌面版本，唯獨沒有對Linux做出明確的發布時間安排，所以，不少用戶詢問何時能開放該平臺版本。OpenAI還沒有給出詳細的日...OpenAIChatGPT使用OpenAI和Kumologica對用戶支持請求進行智能分類
原創本文將討論如何使用Kumologica中AI代理和OpenAI平臺，實現智能案例分類場景的設計。本文將演示如何使用??Kumologica??和??OpenAI??協助開發出AI代理API。此類API可以使用用戶提交的信息，有效地對企業內生成的用戶支持請求案例進行分類，而無需客戶支持代理（即：Helpdesk之類的接單人員）的干預。從實用性角度考慮，這樣的API管理方案可以自動對來自各種渠道的案例，進行分類和優先級的判定，識別出那些高優先級的案例...OpenAIKumologicaAI代理LightRAG開源了！輕巧、強大，GraphRAG的進化版
Hi，這里是Aitrainee，歡迎閱讀本期新文章。我們以前介紹了HybridRAG、GraphRAG這些，今天我們將介紹一個嶄新的RAG項目：LightRAG。現有的RAG系統老是搞不清復雜關系，答案經常被切碎，缺乏上下文，難以真正理解問題。而LightRAG就是來解決這些問題的，它把圖結構引入文本索引和檢索，采用雙層檢索系統，從低到高全面覆蓋信息。更酷的是，它還能快速更新數據，保持實時高效的響應，而且它已經開源了哦！并且你現在可以通過簡單...LightRAG開源進化版LangChain 與 LlamaIndex：構建 LLM 應用程序的利器，如何強強聯手？
精華近年來，大型語言模型（LLM）的快速發展徹底改變了人工智能領域，為開發者構建功能強大的語言驅動應用程序打開了大門。然而，將LLM集成到實際應用程序中并非易事，需要克服數據索引、檢索和高效查詢等挑戰。LangChain和LlamaIndex作為兩個新興的開源框架，為開發者提供了構建LLM應用程序的強大工具。LangChain提供了高級API和現成的鏈，簡化了與LLM提供商的連接和查詢過程。LlamaIndex則專注于數據框架，通過向量存儲索引和檢索...LangChainLLM應用程序Adaptive-RAG：性能提升50%以上的高效RAG策略
圖片框架自適應RAG通過判斷問題的復雜性來自動選擇使用哪種RAG策略。作者將問題劃分為三類（如上圖的C部分）：?開放領域問答：這類任務通常涉及兩個模塊：一個檢索器和一個閱讀器。隨著具有千億參數的超強推理能力的LLMs的出現，LLMs和檢索器之間的協同作用已經取得了顯著進展。然而，盡管在單跳檢索增強LLMs方面取得了進展，但某些查詢的復雜性需要更復雜的策略。?多跳問答：多跳問答（MultihopQA）是傳統開放領域問答（Open...RAG策略QA
