七位IT專家暢談:如何啟動和擴展成功的AI試點項目
位于美國弗吉尼亞州亞歷山大市的美國專利商標局,正在利用人工智能(AI)項目加快專利分類過程,幫助檢測欺詐行為,擴大審查員對類似專利的搜索范圍,使他們能夠在相同的時間內搜索更多文件,而且他們的每個項目都從試點開始的。美國專利商標局首席信息官Jamie Holcombe表示:“概念證明(PoC)是我們用來了解新技術、測試業務價值假設、降低規模項目交付風險、為全面生產實施決策提供信息的一個關鍵方法。”他說,一旦試點項目被證明是成功的,那么下一步就是確定是否擴大這些試點項目。然后,就是在實際環境中擴展,以及全面投入生產。
印度電子商務供應商Flipkart也在部署一個項目之前遵循了類似的流程,該項目幫助客戶用11種不同語言對數百萬件商品進行文本搜索和視覺搜索?,F在,Flipkart正在測試對話式機器人,使用深度學習來構建模型,模型中包含了用戶意圖檢測、語言翻譯、語音到文本和文本到語音的功能。Flipkart和美國專利商標局都在快速地把計算機視覺、自然語言處理、機器學習和其他人工智能技術擴展運用于業務的其他方面。
盡管人工智能和機器學習令人興奮,但有很多最初的試點項目和PoC項目未能全面投入生產。那些已經取得成功的項目,需要成為戰略計劃的一部分,獲得高管的支持,能夠使用合適的數據,有所需的團隊,有合適的技術和業務指標,以及項目里程碑,經歷多次迭代,快速試錯。“這個過程可能需要一兩年的時間才能達到高質量的水平,期間需要你的耐心,”Flipkart公司工程副總裁Ganapathy Krishnan這樣說道。
為成功奠定基礎
企業正在快速采取行動,開展成功的AI試點項目,投入生產并帶來成果。Forrester人工智能、機器學習和數據科學分析師Rowan Curran表示:“我們已經看到AI項目正在步入主流,有57%的企業正在實施或者正在擴展他們的AI項目,有70%到75%的企業正在從這些項目中看到明顯價值。”此外,根據安永最近的一項調查顯示,有53%的CIO和IT領導者稱,AI范疇內的數據和分析將成為未來兩年的首要投資領域。
但其中很多試點項目在開始之前就注定要失敗,原因有很多,首先就是缺乏自上而下的支持。美國專利商標局的Holcombe說:“你需要來自高管的認可,還必須有所需的資金?!?/p>
有IT主管認為,從組織中層或者自下而上的方式啟動項目會降低項目成功的機會。最成功的項目,應該獲得來自CIO的支持以及高管承諾為項目提供資金,并把AI融合到企業組織整體數字化轉型的戰略當中。
Flipkart公司的Krishnan表示,設定明確的期望值也很重要?!澳悴粦撈谕悴渴鸬捻椖繒母旧细淖儤I務,這是一個漫長的過程,需要時間?!?/p>
PoC也可以是在企業內部磨煉能力的一種練習,也是這是制造公司禮來(Eli Lilly)采取的一種方法。禮來公司信息和數字解決方案副總裁、首席信息官Tim Coleman說:“通過PoC,我們試驗并了解了技術和項目交付的規模維度。”這支團隊正在將自然語言處理功能應用于業務領域的自然語言發現、生成和翻譯,范圍覆蓋很廣,從臨床和科學內容創作到產品開發、高級搜索和一般管理功能。
但是不要把這種能力建設練習與需要產生廣泛轉型價值的試點項目混為一談,安永全球人工智能咨詢負責人Dan Diasio警告說,“你想培養自己的能力來實現目標,但是未來當你需要與顛覆者展開競爭、對投資者產生有意義的影響力時,你就必須采取自上而下的方法?!?/p>
這就是醫療企業Atlantic Health System對待人工智能和機器學習項目的方式。Atlantic Health System已經在圖像評估方面成功地進行了試點,以協助放射科醫師,并在預授權自動化方面進行了試點,這種自動化技術可以接收成像訂單并將其通過幾個流程步驟進行調度。該公司高級副總裁、首席信息官Sunil Dadlani說:“人工智能應該是數字化轉型的一部分,而不是一項孤立的舉措。我們正式制定了一個關于人工智能和機器學習的治理結構和投資計劃?!痹诙Y來公司,項目提案在推進之前應該要通過三個標準:在投資回報率方面提供商業價值,具有可接受的成功率,并且項目結果必須與業務戰略和優先事項保持一致,Coleman介紹說。例如,Mosaic PV是禮來公司首批專注于藥物不良反應報告的人工智能項目之一,主要驅動力是“提高生產力并降低處理不良事件的成本,同時保持高標準的質量和合規性”。
問題是什么?
成功的試點應該從定義業務問題開始?!安灰兂闪送ㄟ^答案去尋找問題,”全球專業服務公司Genpact的首席數字策略師Sanjay Srivastava這樣表示。Genpact主要面向大型企業提供關于AI項目的咨詢服務?!澳切W⒂跇I務成功,并且是從問題著手、而不是從答案著手的項目,往往會做得很好?!?/p>
然后要決定AI是否是最佳的答案。Krishnan表示:“這個項目是否適合復雜到值得使用AI的標準?如果你可以通過簡單的、基于規則的方法來做到這一點,那就去做吧。但是,如果你有數十萬甚至數百萬條規則的時候,使用基于軟件的方法是不可行的。”
你有恰當的指標和數據嗎?
說回到美國專利商標局,AI項目需要兩組指標:如何執行模型的技術指標,以及如何量化AI項目商業價值的指標。
Atlantic Health System則是通過為一小部分業務實施具有明確業務KPI的試點項目來確保取得成功。例如,Atlantic Health System的影像評估系統就從在神經內科進行小型試點開始部署,隨后快速擴展到心臟病學和其他領域。這個團隊在八周的時間內創建了一個成功的神經病學試點,展示了項目成果,獲得了心臟病學和所有其他服務線的支持。
Flipkart和美國專利商標局一樣,首先把目光集中在技術模型指標上,然后運行A/B測試,看看對業務會產生怎樣的影響。目前,該團隊正在開發和測試一個AI輔助的對話式機器人。他們從“可回答性”這一指標開始,也就是機器人在回答問題方面的能力。現在他們正在運行A/B測試,確定這是否會對業務產生可衡量的影響。
AI項目嚴重依賴大數據,你需要所需的速度、數量和種類,Dadlani說?!叭绻愕臄祿|量不佳,你就不會看到預期的結果。”
Genpact公司的Srivastava對此表示認同?!皹嫿ˋI系統的工作,有90%是圍繞數據攝取、協調、工程和治理的。如果你專注于10%而放棄這90%,從一開始就失敗了,所以你要構建數據的基礎?!?/p>
你還要能夠在不同的A/B測試之間提供持續的反饋——實時獲取數據,以便調整模型。但是你所在的企業組織可能無法自動地快速提供數據。例如,如果你正在研究預測模型,而團隊沒有自動獲取有關客戶購買商品的信息,那么你就無法完成這個循環。在完全部署后繼續反饋循環也很重要,因為客戶的偏好會隨著時間推移而改變。如果你的模型沒有考慮到這一點,你就不會得到你期望的結果,這種結果被稱為“模型漂移”。
試點項目要擴展嗎?
雖然在你的初步預期中,試點項目可能是可以全面部署的,但能否擴展取決于這些試點項目。那么,你是否擁有適當的資源可以把試點項目擴展到全面部署。安永的Diasio說:“要進行擴展,你可能需要簡化代碼、引入新技術、將人工智能和機器學習推向邊緣,而不是擁有一個數據存儲庫、雇用新的團隊、建立數據標簽工廠。你需要的,是一整套工程技能?!?/p>
執行試點項目
Flipkart在試點項目中采用了云和MLOps相關功能。“從一開始,試點項目就需要大量的工程支持,必須經常迭代,快速試錯,而要做到這一點,你就需要大型云服務提供商提供的MLOps基礎設施。”他建議說,試點團隊應該定期報告他們距離目標達成還有多遠,并且要確保在試點期間正確設定預期值。
他說:“如果你在試點初期設定了3%,那么你做得很好。”不要期望立即能看到收益。復雜的試點項目往往很難在三個月內看到影響。你要做的,就是部署,找到差距,再次部署,逐步改進提升。
試點項目期間出現了失敗,并不一定意味著試點項目的終結。美國專利商標局的增強分類系統最初就失敗了。Holcombe說:“從一開始,我們就遇到了數據集管理不當的問題。”但是團隊重新調整,繼續進行試點,直到系統性能大大優于手動過程?!叭绻闶×耍灰艞?,找出失敗的原因?!?/p>
最終評估
以上幾位CIO、IT主管和顧問,會使用各種方法來評估他們的試點項目。在Atlantic Health System,一旦初步試點完成,就到了評估結果的時候,這決定了是否要延長試點、推進生產、還是減少損失。Dadlani說:“試點項目必須提供可感知的成功衡量標準,只有當我們看到有希望的結果時,我們才會說,擴大規模需要什么,需要多少時間,實現價值需要多長時間,技術基礎設施資源需要哪些投資,以及我們如何付諸實施。”
禮來公司的Coleman表示,試點項目失敗的原因有很多:AI技能不足、標記數據不足、項目愿景或價值主張不明、缺乏敏捷性、缺乏快速試錯的心態、缺乏來自高管的支持、以及缺乏組織變革管理來推動業務采用。
你要向上匯報了對財報至關重要的指標。例如,如果定價算法預計可以節省5000萬美元,那么迄今為止已經實現的目標與預期的目標之間可能存在差距,Diasio:“當你談論大型耗資項目的時候,試點項目往往缺乏創造如此大價值的可信度,所以要盡可能努力記錄那些已經實現的價值?!?/p>
這也是重新評估試點是否需要擴大規模的一個機會。Genpact公司的Srivastava說:“很多PoC在技術上非常成功,但在擴展時并不具有經濟效益,”其他考慮因素還包括擴展項目需要多長時間,以及需要哪些資源。
但是,當你放眼長遠時,情況可能會發生變化。Coleman說:“即使在短期內可能無法實現規模化的情況下,具有高交付成功概率的較小項目范圍仍可能帶來短期業務價值,與此同時,技術能力和技能也會發展成熟到可以克服規?;系K的程度。”
然后是基礎設施。你應該確保在擴展的時候檢查了所有假設條件,包括配置、網絡帶寬、存儲和計算。Krishnan表示:“你需要大量的工程支持來擴展試點項目,而這時候基于云的MLOps基礎設施可以提供幫助?!?/p>
最后,你應該確??梢园袮I集成到上游和下游工作流程中。例如,如果你沒有把故障預測整合到上游供應鏈系統中,確保你在所需的時間和地點有所需的備件,那么預測故障功能就無法派上用場。同樣地,這些信息也可以用于下游調整維護計劃。
慢慢著手、快速失敗、耐心等待
成功的人工智能/機器學習試點項目,關鍵在于初始規劃,你要在繼續推進之前就獲得高管的支持和財務上的支持。Holcombe說:“你必須要有高管支持,”從一開始就讓所有利益相關者參與進來。
人工智能/機器學習試點項目應該作為整體數字化轉型戰略的一部分進行,并具有令人信服的業務場景,Dadlani說,達到預期結果是需要耐心的。制定技術和業務影響力指標,并且這些指標可以定義成功與否。確保你擁有所需的資源,組建團隊并且做好快速試錯的準備。因此,在團隊中擁有具備所需的技能和領域專業知識組合,是AI試點項目成功的關鍵。他說:“即使是在試點階段,你也需要一個跨職能的團隊。我們要確保每個人都參與到試點項目中,因為這將成為實際工作流程的一部分,他們必須從一開始就參與進來?!?/p>
那些不具備所有所需人才的組織,應該考慮與外部合作伙伴建立一個混合團隊,而中小型公司則可能需要把更多的職責角色進行外包——如果他們能找到合適人才的話。Srivastava說:“如果你沒有合適的人工智能/機器學習工程師和數據工程師的話,外包是非常困難的。”更重要的是,你的團隊中既需要有了解機器學習又了解所在行業(例如制造業)的人員。這不是一個容易找到的技能組合,因此交叉培訓是至關重要的。
最后,你要考慮到一個可以產生實際業務成果的目標項目,然后擴展到業務的其他領域,就像Atlantic Health System做的基于機器學習的成像評估系統項目一樣。
一旦試點進入全面生產階段,就在你已經完成的工作基礎上再接再厲。讓業務部門及時了解試點進展,展示項目在完全部署后具備哪些功能,并開發出一個平臺讓其他業務部門可在該平臺上使用他們自己的應用。Srivastava說:“如今,變化速度是有史以來最慢的,那些想要實現顛覆和發展的企業,必須改變他們推動價值的方式,如果沒有人工智能,你就無法做到這一點。如果你不投資人工智能的話,你就會顯得束手束腳?!?/p>