大數(shù)據(jù)文摘出品
來源：medium
編譯：李雷、蔡婕、雪清、橡樹_hiangsug
只有不到20％的機器學習poc（概念驗證）項目能夠順利投產，而這其中的大部分也可能會止步于其方案的“產品化”階段。從概念驗證到實際產品，人工智能應用落地到底要跨越多大的鴻溝呢？來看看這篇文章怎么說。注意：文中可能存在“機器學習”和“人工智能”概念混用的情況，不必糾結于此。
今年，雖然不少公司都在部署人工智能解決方案，也取得了一定的成果，但只有少數(shù)公司做到了全面部署人工智能，從而為公司帶來真正的附加價值。
據(jù)我所知，只有不到20％的機器學習poc（概念驗證）項目能夠順利投產，而這其中的大部分也可能會止步于其方案的“產品化”階段。
poc的困境
大多數(shù)公司首先通過概念驗證（proof of concept , poc）項目來證明人工智能方案可以削減成本，改善客戶體驗，或者在某種程度上形成業(yè)務差異化。
poc通常采用相對簡單的算法，訓練數(shù)據(jù)也是即時可用的或內部標記的，其主要目標是證明可以用少量的數(shù)據(jù)訓練算法以解決特定場景的問題。
如果poc獲得成功，那么項目將繼續(xù)進入產品化階段。
進入產品化階段意味著ai項目將變得更加復雜。這個階段不再需要證明該解決方案的有效性，而是要將ai項目集成到公司的基礎架構中，并保證它在真實環(huán)境下能夠很好地工作。
為了使項目取得成功，機器學習項目需要從一開始就將公司結構、客戶、公司規(guī)模和內部工作流程等考慮在內。
poc往往會影響系統(tǒng)基礎架構的性能以及知識和數(shù)據(jù)管理等，這些都將阻礙它們進入下一階段——產品化。在ai項目中，產品化階段的困難程度往往容易被低估。在這個階段里，系統(tǒng)的工作方式很有可能需要完全改變，并且當我們越來越接近解決方案的最終版本時，新的問題也會不時出現(xiàn)。
在人工智能集成的最后階段，ai項目可能會跨多個業(yè)務線，甚至可能直面普通用戶/客戶，面臨著來自企業(yè)級基礎架構、安全性和技術支持等多方面的挑戰(zhàn)。
產品：在現(xiàn)實生活中使用的系統(tǒng)。它不像poc那樣是為了測試某些東西是否有效，也不像用樣本數(shù)據(jù)做的簡單實驗。它是用真實數(shù)據(jù)來解決現(xiàn)實問題的系統(tǒng)。
很多時候，ai方案提供商都未能證明其初始方案的有效性。為什么ai項目的實施過程會變成一場噩夢呢？其實，大多數(shù)時候，ai項目沒能進入產品化階段是因為以下因素：
poc項目沒有產生期望的結果運營成本過高操作過于復雜缺乏數(shù)據(jù)poc項目沒能達到利益相關者的要求比如，某公司有一個業(yè)務問題，剛好可以用人工智能來解決，但如果需要提供核心數(shù)據(jù)或必須使用新的工作流程，那么這個公司可能就會放棄該項目。實際上，在ai項目產品化之前，必須先處理好它與軟件、數(shù)據(jù)安全和大規(guī)模的新的訓練數(shù)據(jù)等一系列相關的問題。
另一個原因可能是低估了構建一個具有實際功能的ai所需的成本。將原型進行產品化需要很大的投資！公司管理層要確保他們能夠負擔得起。
機器學習的概念驗證（poc）是漫長實踐過程中的第一步。當你將其擴展到實際規(guī)模的應用時，你需要站在更高的角度來看待所出現(xiàn)的問題。
為什么會失?。?br>ai項目的概念驗證（poc）路線圖上存在某些挑戰(zhàn)，比如數(shù)據(jù)的缺乏，法律上的問題，公司員工對ai相關應用的畏懼以及系統(tǒng)集成能力是否足夠等，因此任何公司都必須在將模型產品化之前先分析相關影響因素。
在我看來，公司應該同時開展多個poc項目，因為這樣有助于了解公司的潛力，改善內部行為方式，快速終止那些沒有前景的人工智能poc，并發(fā)掘出最有前景的項目以便繼續(xù)監(jiān)控和投入資源。我看到有些公司指望用他們的第一個poc來賺錢并且解決復雜問題，這么做十有八九會失??！
公司還應該考慮到，進行概念驗證所需的技能與將其轉化為產品所需的技能是大不相同的。如果沒有一個支持ai集成的架構，那么即使是最有前景的項目也會夭折。
人工智能項目還需要得到管理層的支持，如果沒有長期投資的恒心，ai應用就只能是小打小鬧，永遠達不到任何有意義的規(guī)?；驅嵱眯运?。這類項目的成功需要時間和耐心。
為了使poc獲得成功，必須進行廣泛的研究，建立一個跨職能部門的團隊，并調研和測試各種硬件規(guī)格，此外還可能需要請外部專家對模型進行微調。雖然我們在最初研究的2-3周內就做可以做出原型，但接下來的開發(fā)需要更長的時間，并且需要大量的資金和時間投入。
根據(jù)我的經驗，一個好的poc需要大約半個月時間。事實上，整個數(shù)據(jù)收集過程是非常耗時的。更不必說，大多數(shù)公司在提到使用ai都有驚奇的想法，但往往得不到對的數(shù)據(jù)。
舉個例子，如果在做poc的時候，算法可以識別在相同光線、距離和角度下拍攝到的人臉，那么在試點項目中該算法就需要適應不同的光線、距離、角度、膚色、性別，等等。這自然意味著更多的數(shù)據(jù)。
poc中的機器學習模型所需的輸入數(shù)據(jù)與產品中持續(xù)大規(guī)模的輸入數(shù)據(jù)之間存在很大差別，能認識到這一點很重要，但這經常被公司或者項目組所忽視。
我在幾個項目中使用了不一樣的和不完善的數(shù)據(jù)集，這使我意識到：人們在將小規(guī)模的ml算法轉移到生產過程中時，可能會大大低估為獲取數(shù)據(jù)而投入的時間和精力，而這些數(shù)據(jù)是擴展原有ml算法所必不可少的。
關鍵之處在于將實際需求和poc數(shù)據(jù)集之間的“差距”最小化。因此，我強烈建議使用真實場景的數(shù)據(jù)。
構建一個可靠且相關的數(shù)據(jù)集需要很多時間。為了正確地訓練一個預測模型，必須遵循特定的流程來生成符合標準的數(shù)據(jù)。
當poc成功后，一些ai團隊會考慮獨立完成整個項目的數(shù)據(jù)準備工作。我相信，他們低估了公司提供所需數(shù)據(jù)的難度（信息孤島，效率低下等）。在這一步，我們通常會開始了解公司的運作方式。
實際上，生產系統(tǒng)中會包含許多未知案例，訓練算法會產生對大量數(shù)據(jù)的需求（通常是壓倒性的）。
試點階段
一個成功的poc將說服項目所有者交付試點階段（a pilot phase）的資金。試點是poc與生產項目之間的一個項目步驟，組織不會關停任何其他系統(tǒng)或更改人員配置。在對算法進行調整和訓練的過程中，試點與現(xiàn)有系統(tǒng)一起運行。這是一個必要的步驟，因為在此過程中會面臨許多問題或工作流程挑戰(zhàn)。
生產的持續(xù)時間在某種程度上是由生產所需的人工智能精度水平決定的。顯然，一些項目需要更多的時間來達到一定的成熟水平（自動駕駛汽車等）。其他項目可以在明顯較低的置信水平下帶來積極的投資回報率（return on investment, roi）。
大多數(shù)情況下，試點項目沒有足夠多樣化的數(shù)據(jù)來進行大規(guī)模運作。
從poc到產品
正如我們所說的，很少有項目團隊能夠成功地跨越這個階段并繼續(xù)下去。實際上，大多數(shù)項目從poc到產品化需要大量不同的資源。在生產步驟中，當我們意識到可能存在的新的問題時，通常會發(fā)現(xiàn)項目需要更多的時間才能完全運行。此外，我們越多地涉及終端用戶，就越發(fā)意識到pocs離現(xiàn)實應用還有很遠的距離。
poc所有形式的數(shù)據(jù)建模都必須簡化但又要反映真實情況，而在這個過程中，總會丟失一些真實性。這為ml帶來了風險，因為實際數(shù)據(jù)可能比概念驗證（poc）所用的訓練數(shù)據(jù)更容易出現(xiàn)建模問題。
對此，明顯的解決方案是為模型添加更多細節(jié)，并擁有更多字段、表格、關系等。但是，模型越精細，就越難以使用和理解。這也是建立在你可以獲得更多數(shù)據(jù)的假設之下。我見過許多項目因為缺乏數(shù)據(jù)而失敗，還有一些項目使用了數(shù)據(jù)增廣技術（在圖像識別項目中，這是一種減少過擬合的好方法）。
source
部署常規(guī)的軟件應用程序本就是困難的——但是如果軟件是基于機器學習的，情況可能會更糟！ml具有一些特性，將使得大規(guī)模部署變得更加困難。
在我最近的一個項目中，我意識到一旦你的算法訓練好后，它們就不會一直被使用。例如，你的客戶/終端用戶只會在需要的時候調用它們。
管理api調用的想法是關鍵。實際上，你需要確保免為不需要的服務器付費。一旦ai解決方案的運行成本過高，公司可能會憂心于繼續(xù)使用它。
進入生產階段后，從數(shù)據(jù)的角度來看，事情將開始變得更加復雜。除非算法的問題空間非常簡單或是完全靜態(tài)的，否則訓練永遠不會結束。問題空間在演變，新的使用案例也在不斷變化，以及來自競爭對手的壓力——他們也試圖實施差異化ml策略，所有這些意味著組織必須使他們的模型勝任更加模糊的特定案例。而在已經很高的模型置信水平下，就訓練數(shù)據(jù)而言，每1%的增量增長都相當昂貴。
信息系統(tǒng)中的ai集成
ai解決方案可能已準備就緒，但是還有一步工作要做。事實上，實際規(guī)模的實現(xiàn)還包括將ai與信息系統(tǒng)和架構連接起來。根據(jù)經驗，我得出的結論是——人工智能部署中最大的問題是難以將認知項目與現(xiàn)有流程和系統(tǒng)進行集成。最佳選擇是提供機器學習模型的api，或將其作為現(xiàn)有系統(tǒng)中的程序代碼模塊。
當涉及到ai項目時，無論是否成功，poc都非常有用。我相信，通過一個特別的過程（數(shù)據(jù)分析，組織調整等），我們有可能增加poc進入生產階段的機會。
企業(yè)需要為與ai供應商的合作做好準備，這種合作方式應當既不會讓企業(yè)的數(shù)據(jù)面臨風險，也不會造成長期依賴，反而會增強其競爭優(yōu)勢。

---

福建米其林廚師培訓哪里能學到真技術
廣利玫瑰樹根 科技木皮
進口過濾器 減壓閥 油霧器三聯(lián)件 氣源處理元件NUMAX
SMC濾芯 日本SMC濾芯 SMC精密濾芯
供應轉彎式輸瓶機供應商厚禮超乎你的想象
人工智能落地之路：從概念驗證到產品
耐高溫PP PP耐高溫
光電式傳感器
浦東新區(qū)移動門店裝修哪家優(yōu)惠-移動門店裝修
檸檬工坊加盟，一家做“大市”的茶飲品牌
夏天正品浪莎男士背心 木纖維黑白色莫代爾吸汗修身工字背心批發(fā)
內蒙古盛博門業(yè)有限公司供應廠家直銷庫房門車庫門
江蘇防火巖棉板直銷廠家介紹巖棉板的安裝方法
小伙子辭掉年薪18萬工作，回家養(yǎng)，“這個”既然賺了，800多萬
NMR-STEIA2A-791A批發(fā)，dd伺服馬達供應
深圳新藍圖壓鑄ERP容易上手嗎
母線槽 母線槽價格 插接母線槽
洗衣凝珠 化妝品OEM代加工 OEM/ODM
松江區(qū)苗木基地哪家好|松江區(qū)歐洲月季批發(fā)收費標準
贈品禮盒枕頭影樓美容院手機店活動禮品開業(yè)獎品磁療枕保健枕定制