在分析由多個(gè)數(shù)據(jù)庫(kù)構(gòu)成的關(guān)系數(shù)據(jù)庫(kù)時(shí),需要數(shù)據(jù)分析專家找出數(shù)據(jù)庫(kù)之間的復(fù)雜關(guān)系和相關(guān)性,需要耗費(fèi)很多工時(shí)去通過機(jī)器學(xué)習(xí)調(diào)整預(yù)測(cè)模型等。但是由于可以熟練分析數(shù)據(jù)的專家資源的稀缺,所以在應(yīng)對(duì)急劇增長(zhǎng)的高度數(shù)據(jù)分析需求時(shí),為了迅速地進(jìn)行海量數(shù)據(jù)分析,就需要即便不是專家也可以輕易掌握的精確分析手段。
NEC自動(dòng)化預(yù)測(cè)分析技術(shù)可實(shí)現(xiàn)從抽取/設(shè)計(jì)有效數(shù)據(jù)項(xiàng)目(特征值)到構(gòu)建最佳預(yù)測(cè)模型的一系列流程的自動(dòng)化。因此即便不具備高度的數(shù)據(jù)分析能力,也可以快速精準(zhǔn)地做出與數(shù)據(jù)分析專家一樣或更高水準(zhǔn)的預(yù)測(cè)分析。
NEC與三井住友銀行、日本綜合研究所共同對(duì)此技術(shù)進(jìn)行了驗(yàn)證結(jié)果表明,此技術(shù)可以將數(shù)據(jù)分析專家需要2~3個(gè)月才可以完成的工作在保持精度的前提下縮短到1天。2017年,NEC力爭(zhēng)將此技術(shù)作為企業(yè)可在內(nèi)部進(jìn)行大數(shù)據(jù)分析的服務(wù)向企業(yè)用戶進(jìn)行推廣。
NEC一直專注于社會(huì)解決方案業(yè)務(wù),希望在進(jìn)一步擴(kuò)大和提升應(yīng)用該技術(shù)的服務(wù)業(yè)務(wù)的同時(shí),通過分析解決方案為客戶創(chuàng)造新的商機(jī)和提高企業(yè)價(jià)值貢獻(xiàn)力量。
背景
現(xiàn)今,企業(yè)都希望能夠第一時(shí)間精確把握在多變的事業(yè)環(huán)境下各種客戶的需求,并反映到企業(yè)的經(jīng)營(yíng)舉措中去。通過分析企業(yè)積累的龐大數(shù)據(jù)來發(fā)現(xiàn)/創(chuàng)造新的價(jià)值,大大影響企業(yè)的發(fā)展。另一方面,數(shù)據(jù)分析專家的全球性短缺和海量數(shù)據(jù)分析需求的急劇增長(zhǎng)的矛盾,使得快速分析數(shù)據(jù)成為一個(gè)亟待解決的課題。
NEC自2012年開發(fā)出可發(fā)現(xiàn)混雜在大數(shù)據(jù)中的規(guī)律的分析手法“異構(gòu)混合學(xué)習(xí)技術(shù)”以來,一直在不斷研發(fā),將資深數(shù)據(jù)分析專家的高度人工操作(發(fā)現(xiàn)數(shù)據(jù)關(guān)聯(lián)性、從抽取并設(shè)計(jì)特征值到構(gòu)建分析模型)進(jìn)行精確地自動(dòng)化,開發(fā)出數(shù)據(jù)分析的前期處理技術(shù)“特征值自動(dòng)設(shè)計(jì)技術(shù)”等。
本次發(fā)布的“自動(dòng)化預(yù)測(cè)分析技術(shù)”是在以往技術(shù)基礎(chǔ)上的升級(jí),可以全自動(dòng)地對(duì)關(guān)系數(shù)據(jù)庫(kù)的海量數(shù)據(jù)進(jìn)行分析預(yù)測(cè)。
新技術(shù)的優(yōu)勢(shì)
數(shù)據(jù)分析流程
1.加強(qiáng)了“特征值自動(dòng)設(shè)計(jì)技術(shù)”,從關(guān)系數(shù)據(jù)庫(kù)中自動(dòng)發(fā)現(xiàn)特征值
加強(qiáng)了2015年發(fā)布的“特征值自動(dòng)設(shè)計(jì)技術(shù)”,從業(yè)務(wù)系統(tǒng)中常用的關(guān)系數(shù)據(jù)庫(kù)中自動(dòng)設(shè)計(jì)特征值。
公司的重要經(jīng)營(yíng)信息通常被分為多個(gè)表,存儲(chǔ)在關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)中。而AI技術(shù)則可以從多個(gè)要分析的關(guān)系數(shù)據(jù)庫(kù)中,快速搜索并發(fā)現(xiàn)假設(shè)的有效數(shù)據(jù)的排列組合值(特征值),其中必不可少的海量搜索請(qǐng)求的生成也是系統(tǒng)自動(dòng)完成的。
因此,不需要依賴于分析經(jīng)驗(yàn)及相關(guān)知識(shí)的假設(shè)和計(jì)劃,也不需要操作數(shù)據(jù)生成特征值的大量作業(yè),從而大幅縮短分析時(shí)間和節(jié)省分析人力。此外,機(jī)器作業(yè)遠(yuǎn)遠(yuǎn)超越人工的速度,可以在短時(shí)內(nèi)搜索大量假設(shè),所以有分析結(jié)果精準(zhǔn)化、能夠發(fā)現(xiàn)人注意不到的新知識(shí)等優(yōu)勢(shì)。
2.通過“預(yù)測(cè)模型自動(dòng)設(shè)計(jì)”技術(shù)從多個(gè)模型中自動(dòng)選擇最佳模型
除了基于特征值數(shù)據(jù)的“異構(gòu)混合學(xué)習(xí)”技術(shù),用戶還可從基于邏輯回歸及決策樹等各種機(jī)械學(xué)習(xí)手法的大量預(yù)測(cè)模型中,選擇或者組合可導(dǎo)出目標(biāo)分析結(jié)果的最佳預(yù)測(cè)模型。另外,關(guān)于預(yù)測(cè)模型計(jì)算出的預(yù)測(cè)值,還會(huì)提供預(yù)測(cè)依據(jù)(為什么得出這樣的預(yù)測(cè)結(jié)果)。
由于可掌握預(yù)測(cè)依據(jù),用戶可以在根據(jù)情況做出適宜的計(jì)劃和判斷時(shí)更加有理有據(jù)。
本次開發(fā)出了直觀可操作的GUI(圖形用戶界面),操作者只需要按照提示畫面進(jìn)行相應(yīng)的操作,就可以簡(jiǎn)單快速地完成過去需要花費(fèi)很多工時(shí)的數(shù)據(jù)特征值探索與預(yù)測(cè)模型構(gòu)建工作。因此即便不具備很專業(yè)的數(shù)據(jù)分析能力也可以在短時(shí)間內(nèi)做出與分析專家同等或更高水平的精確預(yù)測(cè)分析。
此技術(shù)有助于分析企業(yè)重要的經(jīng)營(yíng)信息數(shù)據(jù),并基于新的潛在需求制定戰(zhàn)略、進(jìn)行假說驗(yàn)證、促使政策實(shí)施,從而為公司快速做出商業(yè)判斷做貢獻(xiàn)。
NEC集團(tuán)致力于在全球范圍內(nèi)推進(jìn)社會(huì)解決方案,提供安心、安全、高效、公平的社會(huì)價(jià)值,將先進(jìn)的ICT技術(shù)與知識(shí)相融合,為實(shí)現(xiàn)更加光明更加豐富多彩的高效社會(huì)盡一份力量。