讓數據要素變?yōu)榭梢?jiàn):淺談數據可視化的行業(yè)應用
自十九屆四中全會(huì )將數據增列為新型生產(chǎn)要素后,我國數據領(lǐng)域的發(fā)展邁上新臺階。但相較于土地、勞動(dòng)力、資本等傳統生產(chǎn)要素而言,數據給人的感覺(jué)并不直觀(guān),其價(jià)值的發(fā)揮也往往需要依托于其它生產(chǎn)要素,這是造成數據要素價(jià)值被低估的重要原因。數據可視化即是解決如何使數據要素變?yōu)榭梢?jiàn)的問(wèn)題,是數據內在價(jià)值的展現方式。
數據可視化即通過(guò)圖表的形式將數據的內在信息有邏輯性地呈現給用戶(hù),使用戶(hù)更容易發(fā)現數據中蘊藏的規律,找出問(wèn)題,進(jìn)而做出決策;另一方面,數據可視化項目也是一張重要的名片,是企業(yè)數字化建設效果的呈現。本文將梳理各行業(yè)的數據可視化需求、可視化項目效果的決定因素、數據可視化行業(yè)的發(fā)展趨勢以及數據可視化相關(guān)的標準體系。
數據可視化的需求普遍存在于各個(gè)行業(yè)
作為一種通用的數據應用技術(shù)手段,數據可視化對各個(gè)行業(yè)都具備非常重要的意義,在政務(wù)、工業(yè)、金融、零售、水利、農業(yè)等不同領(lǐng)域均有廣泛的需求。不同行業(yè)在進(jìn)行可視化項目建設時(shí)側重點(diǎn)也會(huì )存在一定差異。下面將著(zhù)重介紹政務(wù)、工業(yè)、商務(wù)服務(wù)及自然資源開(kāi)發(fā)這四個(gè)典型行業(yè)的可視化需求。
1、政務(wù)領(lǐng)域的可視化需求
數據可視化建設通常是數字政府、智慧城市、政務(wù)管理系統等項目中的重要環(huán)節。在政務(wù)管理的數字化轉型、智能化升級的過(guò)程中,涉及大量的交通、環(huán)境、城市規劃、政務(wù)服務(wù)數據的可視化。
圖1:政務(wù)領(lǐng)域的數據可視化
(圖片由聯(lián)通數科提供)
政務(wù)領(lǐng)域用戶(hù)的可視化需求通常有以下特點(diǎn):
(1)數據來(lái)源和質(zhì)量:政務(wù)領(lǐng)域的可視化項目通常涉及眾多領(lǐng)域的數據,來(lái)自于多個(gè)單位或部門(mén),因此用戶(hù)會(huì )關(guān)注數據的來(lái)源和質(zhì)量,包括數據是否全面、準確、可靠等。
(2)易用性和用戶(hù)體驗:用戶(hù)希望能夠輕松地使用可視化工具來(lái)獲取所需的信息,因此可視化工具的易用性和用戶(hù)體驗非常重要。例如,可視化工具是否能夠快速響應用戶(hù)的操作、是否具有友好的界面和導航等。
(3)數據呈現效果:用戶(hù)需要能夠通過(guò)可視化工具對數據進(jìn)行分析和呈現,以便更好地理解數據。因此,可視化工具應該提供多種呈現方式,例如地圖、圖表、熱力圖等,并具有數據過(guò)濾、聚合、分組等功能。
(4)安全性和隱私性:政務(wù)領(lǐng)域的數據通常涉及到大量的個(gè)人隱私信息,因此用戶(hù)關(guān)注數據的安全性和隱私性??梢暬ぞ咝枰哂袊栏竦陌踩源胧?,例如數據加密、訪(fǎng)問(wèn)控制、身份驗證等,以保護數據的安全性和隱私性。
2、工業(yè)領(lǐng)域的可視化需求
數據可視化建設普遍存在于智慧工廠(chǎng)、智能制造、工業(yè)4.0、工業(yè)數字孿生、供應鏈管理、工業(yè)園區管理等重大項目中。工業(yè)領(lǐng)域的數據可視化有助于管理人員加強對工業(yè)生產(chǎn)情況的掌控,從而更好地分析解決問(wèn)題。
圖2:工業(yè)領(lǐng)域的數據可視化
(圖片由阿里云DataV團隊提供)
工業(yè)領(lǐng)域用戶(hù)的可視化需求通常有以下特點(diǎn):
(1)多源數據接入:工業(yè)領(lǐng)域有非常多的工業(yè)協(xié)議需要接入和處理,是可視化之前需要先做處理。
(2) 實(shí)時(shí)性:在工業(yè)領(lǐng)域中,數據可視化需要實(shí)時(shí)反映生產(chǎn)過(guò)程和設備運行狀況,對于實(shí)時(shí)性的要求比其他可視化場(chǎng)景更高。
(3)易讀性和可操作性:工業(yè)生產(chǎn)場(chǎng)景中,環(huán)境較為復雜,對于信息的可讀要求更高,例如需要通過(guò)顏色、告警等方式標識不同的設備狀態(tài),并且能夠進(jìn)行操作處理。
(4)可靠性和精度:工業(yè)領(lǐng)域對于生產(chǎn)制造過(guò)程的展示,對于可靠性和精度也有更高的要求。
3、商務(wù)服務(wù)領(lǐng)域的可視化需求
商務(wù)服務(wù)領(lǐng)域的可視化通常需要對客戶(hù)行為數據、物流數據、倉儲數據、交易數據等進(jìn)行關(guān)聯(lián)性的展示,通常會(huì )融合數據挖掘等數據應用技術(shù)開(kāi)展大數據營(yíng)銷(xiāo)、管理供應鏈、開(kāi)發(fā)設計商品等。
圖3:商務(wù)服務(wù)領(lǐng)域的數據可視化
(圖片由觀(guān)遠數據提供)
商務(wù)服務(wù)領(lǐng)域用戶(hù)的可視化需求通常有以下特點(diǎn):
(1)輔助分析能力:商務(wù)服務(wù)領(lǐng)域的可視化通常會(huì )具備一定的數據分析及挖掘能力,如趨勢分析、聚合分析等,并能通過(guò)圖表將分析結果進(jìn)行值觀(guān)展示。
(2)交互能力:商務(wù)服務(wù)領(lǐng)域的數據之間的關(guān)系比較復雜,如需基于用戶(hù)的交互進(jìn)行逐步深入的數據洞察,則需要進(jìn)行大量的下鉆、上卷、多表關(guān)聯(lián)等操作,可視化交互的實(shí)時(shí)性和用戶(hù)友好程度尤為重要。
(3)可視化展現的豐富程度:商務(wù)服務(wù)領(lǐng)域所涉及的內容豐富,對可視化展現的豐富程度有較高的要求。例如否有足夠豐富的圖標類(lèi)型來(lái)支持數據分析結果的展現,最好的表達數據分析的結果。
(4)多種終端類(lèi)型的支持:商務(wù)服務(wù)領(lǐng)域的可視化通常需要多種展現方式,有面向領(lǐng)導決策層的大屏,也有面向前臺業(yè)務(wù)人員和C端客戶(hù)的移動(dòng)端、pc端、平板電腦等,這就需要商務(wù)服務(wù)領(lǐng)域的可視化具備多種終端類(lèi)型的支持。
4、自然資源開(kāi)發(fā)領(lǐng)域的可視化需求
土地、水利、森林、礦產(chǎn)、畜牧、文旅等資源的開(kāi)發(fā)利用過(guò)程中,數據可視化也具備不可或缺的作用。通過(guò)對地理信息數據、遙感監測數據進(jìn)行可視化展示可形成自然資源的數字地圖,使得資源的管理和開(kāi)發(fā)更加值觀(guān)。
圖4:自然資源領(lǐng)域的數據可視化
(圖片由網(wǎng)易有數BI團隊提供)
自然資源開(kāi)發(fā)領(lǐng)域用戶(hù)的可視化需求通常有以下特點(diǎn):
(1)數據加工與處理:自然資源領(lǐng)域,數據來(lái)源多樣,數據可視化平臺需要支持將原始數據加工成滿(mǎn)足系統要求的格式,滿(mǎn)足多源、多表數據整合、需要有豐富的字段加工和函數計算能力。
(2)易讀性和可操作性:自然資源領(lǐng)域場(chǎng)景中,存在大量的自然資源管理規則,需要對規則進(jìn)行數據標準化處理,將文本語(yǔ)言轉化為計算機語(yǔ)言。
(3)視頻流接入:自然資源領(lǐng)域有多樣的監控監測場(chǎng)景,高空無(wú)人機、固定攝像點(diǎn)位以及夜視設備,因此對于可視化平臺視頻監控流的接入標準較高。
(4)三維技術(shù):自然資源的可視化管理的不僅是指標的展示,更需要三維模擬自然資源的真實(shí)空間分布。
影響數據可視化實(shí)踐效果的關(guān)鍵因素
可視化建設方的技術(shù)產(chǎn)品和服務(wù)能力是影響可視化項目成效的兩大關(guān)鍵因素。通常意義上的數據可視化技術(shù)產(chǎn)品一般是指數據可視化平臺或具備可視化能力的商務(wù)智能工具。工具平臺提供可視化項目運行環(huán)境,也提供可視化項目的編輯開(kāi)發(fā)、運維運營(yíng)、管理等功能。但由于各需求側企業(yè)情況差異較大,即使在具備數據可視化產(chǎn)品的情況下,可視化項目建設方依然需要針對不同企業(yè)、不同業(yè)務(wù)場(chǎng)景的各類(lèi)需求進(jìn)行定制化的開(kāi)發(fā)和部署,可視化項目建設方對相關(guān)場(chǎng)景的理解程度、數據開(kāi)發(fā)能力、美術(shù)設計能力、三維建模能力、培訓和長(cháng)期支撐能力等諸多方面都會(huì )決定可視化項目的最終效果。
1、數據可視化技術(shù)產(chǎn)品
數據可視化項目建設方通常會(huì )依托于數據可視化平臺或BI工具開(kāi)展項目,這些技術(shù)工具通??梢酝ㄟ^(guò)拖拽的形式進(jìn)行低代碼開(kāi)發(fā)。通過(guò)將豐富多樣的可視化場(chǎng)景元素、模塊組件、圖標模型等集成在可視化產(chǎn)品中也可實(shí)現能力的復用,避免了重復開(kāi)發(fā)的資源浪費??梢暬夹g(shù)產(chǎn)品的核心能力可歸為以下幾點(diǎn):
(1)數據源接入:由于數據可視化項目通常會(huì )涉及對不同來(lái)源的數據源進(jìn)行展示,數據可視化產(chǎn)品需具備多種數據源接入能力,包括如數據庫、文件、數據集、大數據平臺、API等多種形式的數據源。
(2)可視化編輯器:為用戶(hù)提供項目開(kāi)發(fā)環(huán)境,用戶(hù)能以拖拽的形式完成對可視化項目進(jìn)行設計、開(kāi)發(fā)、編輯修改等操作,包括設計輔助工具、畫(huà)布編輯器、組件庫等技術(shù)模塊。
(3)可視化資源管理:為實(shí)現項目資源的沉淀和復用,可視化技術(shù)工具須具備資源素材的管理能力,能對設計素材、多媒體素材等可復用資源進(jìn)行管理。
(4)可視化應用管理:具備對可視化應用進(jìn)行生命周期管理的能力,包括應用的發(fā)布、下線(xiàn)、運行狀態(tài)控制等能力。
(5)可視化平臺管理:具備對可視化技術(shù)平臺進(jìn)行管理的能力,包括用戶(hù)、權限、日志的管理。
2、數據可視化服務(wù)能力
數據可視化建設方的服務(wù)能力也是影響可視化項目最終成效的重要因素??梢暬ㄔO通??煞譃樗膫€(gè)階段,包括前期的規劃設計、中期的可視化開(kāi)發(fā)、后期的交付與運維以及持續運營(yíng):
(1)咨詢(xún)設計:咨詢(xún)設計階段也包括項目開(kāi)展前的可視化方案咨詢(xún),以及項目開(kāi)展初期的需求調研、策劃、項目設計等環(huán)節。由于各應用側客戶(hù)在組織架構、數據架構和預期目標等方面均存在差異,可視化項目通常有著(zhù)很高的定制化程度,一些非專(zhuān)業(yè)的客戶(hù)也很難直接給出期望的可視化效果,往往需要相應的咨詢(xún)服務(wù)并參考其它案例。項目建設方也需要對客戶(hù)的情況進(jìn)行分析梳理,同客戶(hù)不斷磨合、對齊需求,最終給出滿(mǎn)意的項目設計。
(2)可視化開(kāi)發(fā):可視化開(kāi)發(fā)階段包括對數據處理及挖掘、可視化界面、交互及協(xié)同這三個(gè)主要部分的開(kāi)發(fā)工作。其中數據處理及挖掘即是可視化系統的后臺數據處理,包括對數據的采集、集成、分析挖掘等,這部分工作需要建設方具備較強的數據理解、數據開(kāi)發(fā)能力??梢暬缑骈_(kāi)發(fā)需要建設方構建出圖表、動(dòng)畫(huà)、三維圖像等數據展示組件,并將這些組件進(jìn)行組合,這部分工作需要可視化建設方具備數據分析、三維建模、美術(shù)等方面的能力以及對不同類(lèi)型顯示終端的軟硬件適配。交互及協(xié)同部分涉及到可交互組件的開(kāi)發(fā),要求建設方具備對復雜邏輯分支的梳理把控能力,交互較為頻繁的可視化系統對響應的實(shí)時(shí)性也有較高的要求。
(3)交付與運維:交付與運維階段需要可視化建設方支撐客戶(hù)進(jìn)行可視化系統的部署與發(fā)布,并保障交付及驗收過(guò)程順利進(jìn)行。通常情況下,可視化建設方也將支撐數據可視化系統在一段時(shí)間內的運維保障工作。由于可視化大屏通常處于重要的位置,其平穩運行事關(guān)機構形象,可視化建設方會(huì )提供重保服務(wù),在關(guān)鍵時(shí)期進(jìn)行駐場(chǎng)支撐。
(4)持續運營(yíng):持續運營(yíng)階段需要可視化建設方提供關(guān)于可視化系統的培訓和運營(yíng)支持,并建立相應的知識庫,其目的是使客戶(hù)能夠逐步接手可視化系統的運維及二次開(kāi)發(fā),并最終幫助客戶(hù)實(shí)現持續運營(yíng)的目標。
數據可視化行業(yè)的發(fā)展趨勢
1、數據可視化的普惠化將成發(fā)展方向
隨著(zhù)各方數據智能化建設逐步成熟,數據可視化項目的服務(wù)對象也從決策層逐步延申到普通業(yè)務(wù)人員,在金融、互聯(lián)網(wǎng)等數據密集型產(chǎn)業(yè)中,此趨勢尤為明顯。數據可視化的普惠化將更好地幫助員工了解企業(yè)情況,提升工作效率,且有助于培養員工的數據素養,促進(jìn)企業(yè)的數據文化培養。
2、智能增強技術(shù)將被更多地運用在可視化項目中
隨著(zhù)AI領(lǐng)域的不斷發(fā)展,基于機器學(xué)習技術(shù)的數據分析和挖掘將被廣泛地運用在數據可視化項目中,如趨勢預測、歸因分析等。這些具備智能增強的數據可視化系統將具備一定的對數據進(jìn)行深入分析,并展示分析結果的能力,從而更大程度地發(fā)揮數據的價(jià)值。
3、可視化項目建設方的服務(wù)能力將成為關(guān)注要點(diǎn)
隨著(zhù)各方可視化技術(shù)產(chǎn)品的逐步成熟,可視化建設方的服務(wù)能力將成為客戶(hù)在選型過(guò)程中所關(guān)注的要點(diǎn)。由于各行業(yè)的可視化項目側重點(diǎn)存在一定差異,也將出現更多專(zhuān)注于特定場(chǎng)景的可視化廠(chǎng)商。
數據可視化相關(guān)標準推進(jìn)情況
TC601大數據技術(shù)標準推進(jìn)委員會(huì )自2020年起即協(xié)同各大數據可視化、BI廠(chǎng)商,構建數據可視化相關(guān)標準體系?!稊祿梢暬脚_技術(shù)要求與測試方法》標準于2020年推出,標準規范了數據可視化技術(shù)平臺所具備的功能點(diǎn),包括6大能力域,45項技術(shù)要求。
圖5:《數據可視化平臺技術(shù)要求與測試方法》標準框架
《數據可視化服務(wù)能力分級要求》標準于2023年4月推出,標準將可視化服務(wù)能力細化為規劃設計、可視化開(kāi)發(fā)、交付及運維、運營(yíng)服務(wù)4大能力域,共12個(gè)能力子域,124個(gè)能力項,覆蓋組織建設、制度流程、技術(shù)工具、人員能力4個(gè)維度,并針對企業(yè)在各個(gè)能力項的不同水平和表現,依次分為五個(gè)等級。
圖6:《數據可視化服務(wù)能力分級要求》標準框架
首批數據可視化服務(wù)能力成熟度評估于2023年4月正式啟動(dòng),歡迎各方咨詢(xún)!
本文內容源自: 大數據技術(shù)標準推進(jìn)委員會(huì )
關(guān)于我們
dbaplus社群是圍繞Database、BigData、AIOps的企業(yè)級專(zhuān)業(yè)社群。資深大咖、技術(shù)干貨,每天精品原創(chuàng )文章推送,每周線(xiàn)上技術(shù)分享,每月線(xiàn)下技術(shù)沙龍,每季度GdevopsDAMS行業(yè)大會(huì )。
關(guān)注*【dbaplus社群】,獲取更多原創(chuàng )技術(shù)文章和精選工具下載