2023年大數(shù)據(jù)行業(yè)預(yù)測
到2023年,大數(shù)據(jù)技術(shù)和產(chǎn)品日益成熟,從而提高企業(yè)數(shù)據(jù)的質(zhì)量和信任度。這將導(dǎo)致企業(yè)內(nèi)部出現(xiàn)更健壯的數(shù)據(jù)組織,從而增加對數(shù)據(jù)建模技術(shù)和數(shù)據(jù)團(tuán)隊/工程師的需求。
Coalesce公司聯(lián)合創(chuàng)始人兼首席執(zhí)行官Armon Petrossian指出,隨著企業(yè)推動變革,數(shù)據(jù)市場將不斷發(fā)展。隨著DBT、Snowflake、Databricks等技術(shù)的興起,過去十年一直是云計算和現(xiàn)代數(shù)據(jù)棧的時代。雖然這種趨勢對中小型企業(yè)影響極大,因為它們可以在幾分鐘內(nèi)啟動數(shù)據(jù)平臺,但大型企業(yè)面臨著不同的挑戰(zhàn),主要圍繞現(xiàn)代化、變更管理和治理。這就是數(shù)據(jù)沿襲開始發(fā)揮關(guān)鍵作用的地方。如今的數(shù)據(jù)市場極其分散,其中一個大問題是,尤其是考慮到經(jīng)濟(jì)衰退以及數(shù)據(jù)是否會整合,以及如何整合。2023年,人們可能會看到更多的并購。此外,希望在非技術(shù)方面有更多的發(fā)展,包括數(shù)據(jù)契約、數(shù)據(jù)網(wǎng)格或高級聯(lián)邦治理流程,因為對于任何成熟的數(shù)據(jù)組織來說,這似乎是數(shù)據(jù)之旅的下一個明顯步驟。
Ocient公司首席執(zhí)行官兼聯(lián)合創(chuàng)始人Chris Gladwin指出,數(shù)據(jù)復(fù)雜性將增加:數(shù)據(jù)的性質(zhì)正在發(fā)生變化。隨著結(jié)構(gòu)化數(shù)據(jù)和半結(jié)構(gòu)化數(shù)據(jù)之間的界限越來越模糊,數(shù)據(jù)類型越來越多,數(shù)據(jù)類型也越來越復(fù)雜。與此同時,用于管理和分析數(shù)據(jù)的軟件和平臺也在不斷發(fā)展。一類新的專用數(shù)據(jù)庫專門處理不同的數(shù)據(jù)類型——圖形、向量、空間、文檔、列表、視頻等等。下一代云數(shù)據(jù)倉庫必須具有多功能性,能夠原生支持多模式數(shù)據(jù),以確保其處理的工作負(fù)載的性能和靈活性。例如,OcientHyperscaleDataWarehouse支持?jǐn)?shù)組、元組、矩陣、行、多邊形、地理空間數(shù)據(jù)、IP地址和大型變長字符字段。在數(shù)字化轉(zhuǎn)型和全球業(yè)務(wù)需求的推動下,分析新的、更復(fù)雜的數(shù)據(jù)類型(包括半結(jié)構(gòu)化數(shù)據(jù))的需求將在未來幾年得到加強(qiáng)。例如,電信網(wǎng)絡(luò)運(yùn)營商可能希望分析網(wǎng)絡(luò)元數(shù)據(jù),以了解其交換機(jī)和路由器的健康狀況?;蛘哌h(yuǎn)洋運(yùn)輸公司可能想要運(yùn)行地理空間分析來進(jìn)行物流和路線優(yōu)化。
Snowplow公司首席數(shù)據(jù)官(CDO)Chris Lubasch說,2023年將是圍繞現(xiàn)代數(shù)據(jù)棧進(jìn)行快速討論的一年。許多新的供應(yīng)商將會出現(xiàn),像Snowflake和Databricks這樣的主要供應(yīng)商繼續(xù)他們的旅程,接管了許多技術(shù)組件,盡管經(jīng)濟(jì)形勢充滿挑戰(zhàn)。但與此同時,也出現(xiàn)了質(zhì)疑現(xiàn)代數(shù)據(jù)堆棧的聲音,這些數(shù)據(jù)堆棧的解耦方法往往會導(dǎo)致許多工具和高成本,更不用說將它們組合在一起的復(fù)雜性了。圍繞“后現(xiàn)代數(shù)據(jù)棧”的討論已經(jīng)開始,人們都渴望看到這將在未來幾年引向何方。
Fivetran公司產(chǎn)品總監(jiān)Alexander Lovell表示,2023年將是數(shù)據(jù)團(tuán)隊開工或停工的時間。盡管回報質(zhì)量存在很大差異,但企業(yè)仍保持了對IT的投資。在經(jīng)濟(jì)領(lǐng)域普遍存在困惑的情況下,是時候讓數(shù)據(jù)團(tuán)隊通過提供可操作的見解而大放異彩了,因為當(dāng)市場處于波動之中時,高管的直覺不那么可靠。最好的數(shù)據(jù)團(tuán)隊將會成長并變得更加重要。不能產(chǎn)生可操作見解的數(shù)據(jù)團(tuán)隊將面臨更大的預(yù)算壓力。
MANTA公司研究與教育副總裁Jan Ulrych說,元數(shù)據(jù)將由數(shù)據(jù)譜系驅(qū)動。元數(shù)據(jù)是當(dāng)今最引人注目的數(shù)據(jù)策略趨勢。然而,這不僅僅是收集元數(shù)據(jù),而是通過激活來釋放它的力量。數(shù)據(jù)沿襲是元數(shù)據(jù)的基本類型,能夠提供最強(qiáng)大的好處。如果操作得當(dāng),它可以實現(xiàn)自動化和智能的數(shù)據(jù)管理實踐。
元數(shù)據(jù)是當(dāng)今最引人注目的數(shù)據(jù)策略趨勢。然而,這不僅僅是收集元數(shù)據(jù),而是通過激活來釋放它的力量。數(shù)據(jù)沿襲是元數(shù)據(jù)的基本類型,能夠提供最強(qiáng)大的好處。如果操作得當(dāng),它可以實現(xiàn)自動化和智能的數(shù)據(jù)管理實踐。
Snowplow公司聯(lián)合創(chuàng)始人Yali Sassoon表示,在2023年,“數(shù)據(jù)產(chǎn)品經(jīng)理”和“數(shù)據(jù)產(chǎn)品管理”將會興起,作為將數(shù)據(jù)視為產(chǎn)品、設(shè)計和實施正確的數(shù)據(jù)合同(作為數(shù)據(jù)產(chǎn)品的一部分)以及使組織構(gòu)建“數(shù)據(jù)網(wǎng)格”所需的關(guān)鍵人物/關(guān)鍵技能集。此外,預(yù)計更多的組織將在云數(shù)據(jù)倉庫和數(shù)據(jù)湖上構(gòu)建可操作(包括實時)用例,并由核心供應(yīng)商(如Databricks和Snowflake)和生態(tài)系統(tǒng)中的公司提供更好的工具支持。最后,預(yù)測將會有更周到的方法/技術(shù)架構(gòu)來管理個人身份數(shù)據(jù)的數(shù)據(jù)民主化和數(shù)據(jù)遵從性之間的緊張關(guān)系。增加對測量數(shù)據(jù)投資的投資回報率的關(guān)注。
vFunction公司首席生態(tài)系統(tǒng)官Bob Quillin表示,迭代取代大爆炸:對于高度復(fù)雜的大規(guī)?,F(xiàn)代化項目,業(yè)務(wù)領(lǐng)導(dǎo)者可能會尋找“簡單的按鈕”,但首席技術(shù)官和軟件架構(gòu)師知道現(xiàn)實情況大不相同。從一個整體中開發(fā)出微服務(wù)是一個迭代過程,通常需要重構(gòu)和平臺化。除非您的應(yīng)用程序相當(dāng)簡單,否則“一次一個”的方法是確保成功和管理風(fēng)險的推薦方法,并實際上提高項目速度。嘗試一次性做太多事情,或者嘗試“大爆炸”的現(xiàn)代化或重寫是大多數(shù)應(yīng)用現(xiàn)代化項目失敗、失敗或失敗的原因。這并不一定像看起來那樣緩慢而穩(wěn)定,因為迭代構(gòu)建的速度將在短時間內(nèi)超過任何大規(guī)模的任務(wù)。
Cherre公司客戶解決方案高級副總裁Raj Bhatti表示,在過去的幾年里,大數(shù)據(jù)被認(rèn)為是一種將顛覆多個行業(yè)的技術(shù)。然而,由于元數(shù)據(jù)驅(qū)動的數(shù)據(jù)結(jié)構(gòu)、AutoML和不斷增長的數(shù)據(jù)種類的進(jìn)步,大數(shù)據(jù)的采用已經(jīng)激增。
數(shù)據(jù)技術(shù)社區(qū)在2022年開始討論元數(shù)據(jù)驅(qū)動的數(shù)據(jù)結(jié)構(gòu)。由于數(shù)據(jù)結(jié)構(gòu)中的主動元數(shù)據(jù)輔助自動化功能減少了人力資源的使用,同時提高了數(shù)據(jù)利用率,因此該技術(shù)將在2023年獲得巨大的吸引力。數(shù)據(jù)結(jié)構(gòu)監(jiān)聽、學(xué)習(xí)并對元數(shù)據(jù)或“場景中的數(shù)據(jù)”采取行動,這有助于用戶訪問場景信息。關(guān)鍵的戰(zhàn)略區(qū)別之一將是能夠訪問場景數(shù)據(jù)。
由于AutoML的出現(xiàn),機(jī)器學(xué)習(xí)(ML)將在明年變得更容易為非專家所接受。這是一類機(jī)器學(xué)習(xí)算法,有助于自動化機(jī)器學(xué)習(xí)模型的設(shè)計和訓(xùn)練。機(jī)器學(xué)習(xí)模型是由人類構(gòu)建的算法創(chuàng)建的。
許多企業(yè)現(xiàn)在要么有內(nèi)部人才,要么有合作伙伴,他們已經(jīng)交付了成功的大數(shù)據(jù)驅(qū)動解決方案。這些有據(jù)可稽的成功故事,加上更有效的分析技術(shù),使得商業(yè)成果越來越成為大數(shù)據(jù)項目中必不可少的過濾器。因此,在2023年,預(yù)計很少會遇到使用研發(fā)預(yù)算的大數(shù)據(jù)項目。
大數(shù)據(jù)在2023年將變得觸手可及的一年。大多數(shù)公司現(xiàn)在都明白數(shù)據(jù)作為一種資產(chǎn)的價值,但許多企業(yè)仍在努力挖掘它的真正價值。嘗試這樣做在一定程度上推動了托管數(shù)據(jù)庫即服務(wù)和/或數(shù)據(jù)管理即服務(wù)的增長,從而降低了復(fù)雜性。2023年,人們將看到這一過程的下一步,企業(yè)高管將開始采用數(shù)據(jù)可視化平臺和工具,以更好地理解大數(shù)據(jù),并利用它做出更明智的決策。
- 上一篇
實時分析能否解決供應(yīng)鏈危機(jī)?
首先,我們來談?wù)勚悄芗夹g(shù)如何幫助更好地了解交通服務(wù)。如今,人們經(jīng)常聽到物聯(lián)網(wǎng)(IoT)這個詞。就運(yùn)輸服務(wù)而言,物聯(lián)網(wǎng)意味著供應(yīng)鏈的每個組成部分都附有某種跟蹤器。
- 下一篇
數(shù)據(jù)湖如何為企業(yè)賦能
數(shù)據(jù)湖可以幫助組織執(zhí)行SQL查詢、大數(shù)據(jù)分析、全文搜索、實時分析和機(jī)器學(xué)習(xí)(ML)等分析來發(fā)現(xiàn)見解。調(diào)查結(jié)果顯示,一般企業(yè)的數(shù)據(jù)每年都會膨脹50%。除了數(shù)據(jù)量之外,這些企業(yè)還管理來自33個獨(dú)特來源的數(shù)據(jù)。除非他們實施數(shù)據(jù)湖技術(shù),否則他們會發(fā)現(xiàn)導(dǎo)航大量和多樣化的數(shù)據(jù)具有挑戰(zhàn)性。