數(shù)據(jù)分析技術(shù)與商業(yè)智能的發(fā)展使得CIO們能以較低成本、快速而深入地處理商業(yè)數(shù)據(jù)。

近期，趨勢(shì)中心調(diào)查顯示，CIO們對(duì)商業(yè)分析的關(guān)注度并不低于如何利用新商機(jī)的力度。例如，隨著越來越多公司不得不面對(duì)海量數(shù)據(jù)，如何利用這些數(shù)據(jù)也被提上了日程。大型數(shù)據(jù)集管理與分析等技術(shù)的出現(xiàn)，能夠提前幫助公司分析成本與發(fā)展趨勢(shì)，提供更有用的信息以幫助公司運(yùn)營業(yè)務(wù)，這意味著公司能夠發(fā)現(xiàn)比以前更深層次的問題。

在采訪中，CIO們總結(jié)出了五點(diǎn)影響他們進(jìn)行商業(yè)分析的IT趨勢(shì)，分別為：大數(shù)據(jù)增長、數(shù)據(jù)快速處理技術(shù)、IT商品的成本下降、移動(dòng)設(shè)備的普及和社交媒體的增長。

第一，大數(shù)據(jù)。

大數(shù)據(jù)指非常龐大的數(shù)據(jù)集，尤其是那些沒有被組織、管理起來，不適于傳統(tǒng)數(shù)據(jù)倉庫的數(shù)據(jù)集。比如：網(wǎng)絡(luò)蜘蛛數(shù)據(jù)、社交媒體反饋和服務(wù)器日志，以及來自供應(yīng)鏈、行業(yè)、周邊環(huán)境與監(jiān)視傳感器的數(shù)據(jù)等，這些數(shù)據(jù)致使公司的商業(yè)分析變得比以往更加復(fù)雜。

盡管并不是每個(gè)公司都需要處理大型、非結(jié)構(gòu)型的數(shù)據(jù)集。但是，Verisk Analytics公司CIO Perry Rotella認(rèn)為所有公司的CIO都應(yīng)當(dāng)關(guān)注大數(shù)據(jù)的分析工具。Verisk幫助金融公司評(píng)估風(fēng)險(xiǎn)，與保險(xiǎn)公司共同防范保險(xiǎn)詐騙，2010年的營收超過了10億美元。

Rotella的工作是預(yù)先尋找數(shù)據(jù)間的聯(lián)系與模型。他認(rèn)為，技術(shù)領(lǐng)導(dǎo)者對(duì)于數(shù)據(jù)大幅度的增長，應(yīng)該持樂觀、歡迎的態(tài)度。

HMS公司CIO Cynthia Nustad認(rèn)為，大數(shù)據(jù)呈現(xiàn)為一種“爆炸性”增長趨勢(shì)。HMS公司的業(yè)務(wù)包括幫助聯(lián)邦醫(yī)療保險(xiǎn)(Medicare)和醫(yī)療補(bǔ)助(Medicaid)項(xiàng)目控制成本及私有云服務(wù)。其客戶包括40多個(gè)州的健康與服務(wù)項(xiàng)目和130多個(gè)醫(yī)療補(bǔ)助管理計(jì)劃。HMS通過阻止錯(cuò)誤支付在2010年幫助其客戶挽回了18億美元的損失，節(jié)約了數(shù)十億美元。Nustad稱：“我們正在收集并追蹤大量素材，包括結(jié)構(gòu)性與非結(jié)構(gòu)性數(shù)據(jù)，因?yàn)槟悴⒉恢滥銓⒃谄渲袑ふ业绞裁础?rdquo;

關(guān)于大數(shù)據(jù)談?wù)撟疃嗟囊豁?xiàng)技術(shù)是Hadoop。該技術(shù)為開源分布式數(shù)據(jù)處理平臺(tái)，最初是為網(wǎng)絡(luò)搜索索引等任務(wù)開發(fā)的。Hadoop為多個(gè)“非關(guān)系型(NoSQL)”技術(shù)(其包括CouchDB 和 MongoDB)中的一種，其通過特殊的方式組織網(wǎng)絡(luò)級(jí)數(shù)據(jù)。

Hadoop可將數(shù)據(jù)的子集合分配給成百上千臺(tái)服務(wù)器處理，而主作業(yè)調(diào)度程序?qū)⒄砻颗_(tái)服務(wù)器匯報(bào)的結(jié)果，因此其具有處理拍字節(jié)級(jí)數(shù)據(jù)的能力。Hadoop既能夠用于分析前的數(shù)據(jù)準(zhǔn)備，也能夠作為一種分析工具。此外，沒有數(shù)千臺(tái)空閑服務(wù)器的公司，也可以從亞馬遜等云廠商那里購買Hadoop的按需服務(wù)。

Nustad稱，盡管并不是為了其大型的聯(lián)邦醫(yī)療保險(xiǎn)和醫(yī)療補(bǔ)助索賠建立的數(shù)據(jù)庫，但是HMS正在探索NoSQL技術(shù)的使用。其包括結(jié)構(gòu)性數(shù)據(jù)，并且能夠被傳統(tǒng)的數(shù)據(jù)倉庫技術(shù)所處理。她稱，經(jīng)過實(shí)踐證明最好用的解決方案，如果從傳統(tǒng)關(guān)系型數(shù)據(jù)庫管理層面出發(fā)并不明智。不過，Nustad認(rèn)為Hadoop在防止欺詐與浪費(fèi)分析上發(fā)揮著重要作用，并具備能夠分析各種格式的病歷方面的潛力。

在采訪中，那些體驗(yàn)過Hadoop的CIO們，包括Rotella和Shopzilla 公司CIO Jody Mulkey在內(nèi)，都將數(shù)據(jù)服務(wù)作為公司業(yè)務(wù)的參考重點(diǎn)。

Mulkey稱：“我們正在使用Hadoop，代替以往數(shù)據(jù)倉庫的工作。更重要的是，我們獲得了以前未有的切實(shí)有用的分析技術(shù)。”例如，作為一家商務(wù)網(wǎng)站，Shopzilla每天會(huì)積累大量的數(shù)據(jù)。他稱：“以前，我們必須要對(duì)數(shù)據(jù)進(jìn)行采樣并對(duì)數(shù)據(jù)進(jìn)行歸類。在處理海量數(shù)據(jù)時(shí)，這一工作非常繁重。”自從采用了Hadoop，Shopzilla能夠分析原始數(shù)據(jù)，跳過許多中間環(huán)節(jié)。

Good Samaritan醫(yī)院是一家位于印第安納州西南的社區(qū)醫(yī)院，其數(shù)據(jù)處于另一種類型。該醫(yī)院的CIO Chuck Christian稱：“我們并沒有我認(rèn)為屬于大數(shù)據(jù)的東西。”盡管如此，管理中規(guī)定要求其整合龐大的電子醫(yī)療記錄，存儲(chǔ)為全新的數(shù)據(jù)類型。他稱，這無疑要求他們實(shí)現(xiàn)從數(shù)據(jù)中收集醫(yī)療保健信息。不過，這可能將在地區(qū)或國家層次的醫(yī)療保健協(xié)會(huì)中實(shí)現(xiàn)，而不是在他們這種單個(gè)醫(yī)院中實(shí)現(xiàn)。因此，Christian未必會(huì)對(duì)這種新技術(shù)進(jìn)行投資。

Island One Resorts公司CIO John Ternent稱，應(yīng)該明確所面臨商業(yè)分析的挑戰(zhàn)取決于大數(shù)據(jù)中的“大”還是“數(shù)據(jù)”。 他認(rèn)為，公司需要一種經(jīng)濟(jì)的方式來分析復(fù)雜的抵押貸款組合，目前，其正在謹(jǐn)慎地考慮在云上使用Hadoop的方案。據(jù)悉，Island One Resorts公司管理著佛羅里達(dá)州內(nèi)的8處度假村。他稱：“這種解決方案有可能解決我們目前遇到的瓶頸。”

第二，商業(yè)分析速度加快。

肯塔基大學(xué)CIO Vince Kellen認(rèn)為，大數(shù)據(jù)技術(shù)只是加快商業(yè)分析這一趨勢(shì)的其中一個(gè)元素。他稱：“我們期待的是一種更為先進(jìn)的海量數(shù)據(jù)分析方法。”與更為快速地分析數(shù)據(jù)相比，數(shù)據(jù)量的大小并不重要，“因?yàn)槟阆胱屵@一過程快速的完成”。

由于目前的數(shù)據(jù)能夠?qū)崿F(xiàn)內(nèi)存中處理，這與硬盤處理相比，其計(jì)算結(jié)果更快，即使僅處理數(shù)G數(shù)據(jù)量，效果依然明顯。

盡管經(jīng)過數(shù)十年的發(fā)展，通過緩存頻繁訪問的數(shù)據(jù)，數(shù)據(jù)庫性能提升了許多。在加載整個(gè)大型數(shù)據(jù)集至服務(wù)器或服務(wù)器集群的內(nèi)存時(shí)，這一技術(shù)變得更加實(shí)用，此時(shí)硬盤只是作為備份。由于從旋轉(zhuǎn)的磁盤中檢索數(shù)據(jù)是一個(gè)機(jī)械過程，因此與在內(nèi)存中處理數(shù)據(jù)相比，其速度要慢許多。

Rotella稱，他現(xiàn)在幾秒中分析的數(shù)據(jù)在五年前則需要花上一整晚的時(shí)間。Rotella的公司主要是對(duì)大型數(shù)據(jù)集進(jìn)行前瞻性分析，經(jīng)常會(huì)涉及到查詢、尋找模型、下次查詢前的調(diào)整等。在分析速度方面，查詢完成時(shí)間非常重要。他稱：“以前，運(yùn)行時(shí)間比建模時(shí)間要長，但是現(xiàn)在建模時(shí)間要比運(yùn)行時(shí)間長。”

列式數(shù)據(jù)庫服務(wù)器改變了關(guān)系型數(shù)據(jù)庫傳統(tǒng)行與列的結(jié)構(gòu)，解決了另一些性能需求。查詢僅訪問有用的列，而不是讀取整個(gè)記錄。選取可選列，這極大地提高了組織或測(cè)量關(guān)鍵列的應(yīng)用性能。

Ternent警告稱，列式數(shù)據(jù)庫的性能優(yōu)勢(shì)需要配合正確的應(yīng)用和查詢?cè)O(shè)計(jì)。他稱：“為了進(jìn)行區(qū)別，你必須以適當(dāng)?shù)姆绞絾査m當(dāng)?shù)膯栴}。”與此同時(shí)，他還指出，列式數(shù)據(jù)庫實(shí)際上僅對(duì)處理超過500G字節(jié)數(shù)據(jù)的應(yīng)用有意義。他稱：“在讓列式數(shù)據(jù)庫發(fā)揮作用之前，你必須收集一定規(guī)模的數(shù)據(jù)，因?yàn)樗蕾囍貜?fù)性提升效率。”

保險(xiǎn)與金融服務(wù)巨頭John Hancock公司的CIO Allan Hackney稱，為了提高分析性能，硬件也需要進(jìn)行升級(jí)，如增加CPU芯片，其與游戲系統(tǒng)中用到的圖形處理器相同。他稱：“可視化需用到的計(jì)算方法與統(tǒng)計(jì)分析中用到的計(jì)算方法非常相似。與普通的PC和服務(wù)器處理器相比，圖形處理器的計(jì)算速度要快數(shù)百倍。我們的分析人員非常喜歡這一設(shè)備。”

第三，技術(shù)成本下降。

隨著計(jì)算能力的增強(qiáng)，分析技術(shù)開始從內(nèi)存與存儲(chǔ)價(jià)格的下降中獲益。同時(shí)，隨著開源軟件逐漸成為商業(yè)產(chǎn)品的備選產(chǎn)品，競爭壓力也導(dǎo)致商業(yè)分析產(chǎn)品的價(jià)格進(jìn)一步下降。

Ternent為開源軟件的支持者。在加入Island One公司之前，Ternent為開源商業(yè)智能公司Pentaho的工程副總裁。他稱：“對(duì)于我來說，開源決定著涉足領(lǐng)域。因?yàn)橄馡sland One這樣的中等規(guī)模公司能夠用開源應(yīng)用替代SAS進(jìn)行統(tǒng)計(jì)分析。”

以前開源工具僅擁有基本的報(bào)告功能，但是現(xiàn)在它們能夠提供最為先進(jìn)的預(yù)測(cè)分析。他稱：“目前開源參與者能夠橫跨整個(gè)連續(xù)統(tǒng)一體，這意味著任何人都能夠使用它們。”

HMS公司的 Nustad認(rèn)為，計(jì)算成本的變化正在改變著一些基礎(chǔ)性架構(gòu)的選擇。例如，創(chuàng)建數(shù)據(jù)倉庫的一個(gè)傳統(tǒng)因素是讓數(shù)據(jù)一起進(jìn)入擁有強(qiáng)大計(jì)算能力的服務(wù)器中處理。當(dāng)計(jì)算能力不足時(shí)，從操作系統(tǒng)中分離分析工作負(fù)載，可以避免日常工作負(fù)載的性能出現(xiàn)下降。Nustad稱，目前這已經(jīng)不再是最佳的選擇了。

她稱：“隨著硬件與存儲(chǔ)越來越便宜，你能夠讓這些操作系統(tǒng)處于一個(gè)商業(yè)智能層。”通過重定數(shù)據(jù)格式和將數(shù)據(jù)裝載至倉庫中，直接建立在操作應(yīng)用上的分析能夠更為迅速地提供答案。

Hackney觀察認(rèn)為，盡管性價(jià)比趨勢(shì)有利于管理成本，但是這些潛在的節(jié)約優(yōu)勢(shì)將被日益增長的能力需求所抵消。盡管John Hancock每臺(tái)設(shè)備的存儲(chǔ)成本在今年下降了2%至3%，但是消耗卻增長了20%。

第四，移動(dòng)設(shè)備的普及。

與所有的應(yīng)用一樣，商業(yè)智能正日益移動(dòng)化。對(duì)于Nustad來說，移動(dòng)商業(yè)智能具有優(yōu)先權(quán)，因?yàn)槊總€(gè)人都希望，Nustad能夠隨時(shí)隨地親自訪問關(guān)于公司是否達(dá)到了服務(wù)級(jí)協(xié)議的報(bào)告。她還希望為公司的客戶提供數(shù)據(jù)的移動(dòng)訪問，幫助客戶監(jiān)控和管理醫(yī)療保健開銷。她稱：“這是一個(gè)客戶非常喜歡的功能。在五年前，客戶不需要這一功能，但是現(xiàn)在他們需要這一功能了。”

對(duì)于CIO們來說，要迎合這一趨勢(shì)更多的是為智能手機(jī)、平板電腦和觸摸屏設(shè)備創(chuàng)建適用的用戶界面，而不是更為復(fù)雜的分析能力。或許出于這方面的原因，Kellen認(rèn)為這相對(duì)容易。他稱：“對(duì)于我來說，這只是小事情。”

Rotella并不認(rèn)為這很簡單。他稱：“移動(dòng)計(jì)算影響著每一個(gè)人。許多人開始使用iPad工作，同時(shí)其它的移動(dòng)設(shè)備正在呈現(xiàn)爆炸式增長。這一趨勢(shì)正在加速并改變我們與公司內(nèi)部計(jì)算資源交互的方式。”例如，Verisk已經(jīng)開發(fā)了能夠讓理賠人在現(xiàn)場(chǎng)快速進(jìn)行分析的產(chǎn)品，因此他們能夠進(jìn)行重置成本評(píng)估。他稱：“這種方式對(duì)我們的分析產(chǎn)生了影響，同時(shí)也讓每一個(gè)需要它的人隨手就能使用。”

Rotella稱：“引發(fā)這種挑戰(zhàn)的因素在于技術(shù)的更新速度。兩年前，我們沒有iPad，而現(xiàn)在許多人都在使用iPad。隨著多種操作系統(tǒng)的出現(xiàn)，我們正力爭搞清楚它們是如何影響我們的研發(fā)的，這樣一來我們就不必不斷的編寫這些應(yīng)用了。”

Island One的Ternent指出，另一方面，為每一種移動(dòng)平臺(tái)創(chuàng)建原生應(yīng)用的需求可能正在消退，因?yàn)槟壳笆謾C(jī)和平板電腦上的瀏覽器擁有了更為強(qiáng)大的功能。Ternent稱：“如果我能夠使用一款專門針對(duì)移動(dòng)設(shè)備，基于web的應(yīng)用，那么我并不能肯定我將會(huì)對(duì)定制的移動(dòng)設(shè)備應(yīng)用進(jìn)行投資。”

第五，社交媒體的加入。

隨著Facebook、Twitter等社交媒體的興起，越來越多的公司希望分析這些由網(wǎng)站產(chǎn)生的數(shù)據(jù)。新推出的分析應(yīng)用支持人類語言處理、情感分析和網(wǎng)絡(luò)分析等統(tǒng)計(jì)技術(shù)，這些并不是典型商業(yè)智能工具套件的組成部分。

由于它們都是新的，許多社交媒體分析工具可以作為服務(wù)獲得。其中一個(gè)典型案例是Radian6。Radian6為軟件即服務(wù)(SaaS)產(chǎn)品，近期已經(jīng)被Salesforce.com所收購。Radian 6是一種社交媒體儀表盤，為Twitte的留言、Facebook上的帖子、博客與討論版上的帖子與評(píng)論中提及的特定術(shù)語進(jìn)行分析，尤其是為商標(biāo)名提供生動(dòng)、直觀的推斷。營銷與客戶服務(wù)部門購買后，這類工具不再依賴于IT部門。目前，肯塔基大學(xué)的Kellen仍然相信他需要對(duì)它們進(jìn)行高度的關(guān)注。他稱：“我的工作是識(shí)別這些技術(shù)，根據(jù)競爭力評(píng)估哪些算法適合公司，然后開始培訓(xùn)合適的人員。”

與公司一樣，大學(xué)也對(duì)其聲譽(yù)監(jiān)督十分感興趣。與此同時(shí)，Kellen表示，他可能還將尋找機(jī)會(huì)以開發(fā)專門用于解決學(xué)校所關(guān)注問題的應(yīng)用，如監(jiān)督學(xué)生入學(xué)率等問題。例如，監(jiān)控學(xué)生在社交媒體上的帖子能夠有幫助學(xué)校與管理人員盡早了解學(xué)生在大學(xué)里遇到的麻煩。Kellen稱，目前戴爾已經(jīng)做了這些工作，其產(chǎn)品支持公司探測(cè)人們關(guān)于故障筆記本電腦的分析。他稱，IT開發(fā)人員還應(yīng)當(dāng)尋找一些辦法將社交媒體分析得出的報(bào)警信息推送至應(yīng)用中，以便于公司對(duì)相關(guān)事件快速做出反應(yīng)。

Hackney稱：“我們沒有訣竅，也沒有工具處理和挖掘海量社交媒體帖子的價(jià)值。不過，一旦你收集了數(shù)據(jù)，你需要有能力獲取公司所需的充足信息，以將它們關(guān)聯(lián)起來。” 雖然Hackney稱John Hancock在這一領(lǐng)域內(nèi)的努力還處于“起步階段”，但他認(rèn)為IT部門，將在公司數(shù)據(jù)的社交分析服務(wù)的數(shù)據(jù)關(guān)聯(lián)中發(fā)揮重要作用。例如，如果社交媒體數(shù)據(jù)顯示公司在中西部地區(qū)的社會(huì)評(píng)論越來越負(fù)面，那么他將希望看到，公司在該地區(qū)就價(jià)格或策略進(jìn)行調(diào)整后是否會(huì)扭轉(zhuǎn)這一負(fù)面趨勢(shì)。

Hackney稱，發(fā)現(xiàn)這類關(guān)聯(lián)的意義在于讓公司領(lǐng)導(dǎo)相信對(duì)社交媒體的投資具有高回報(bào)。他稱：“在我所從事的行業(yè)中，每個(gè)人都是精算師，每個(gè)人都在計(jì)算，他們不會(huì)將任何東西建立在想當(dāng)然之上。”