近年來,大數(shù)據(jù)所帶來的挑戰(zhàn)推動了計算技術(shù)的快速發(fā)展,催生了分布式并行處理平臺Hadoop、軟硬件一體化數(shù)據(jù)庫服務(wù)器Exadata等一批新產(chǎn)品。對于電信運營商這樣的大型企業(yè)而言,需要思考如何應(yīng)用這些新技術(shù),解決在大數(shù)據(jù)時代背景下所面臨的挑戰(zhàn),從而提升企業(yè)價值。
數(shù)據(jù)處理面臨5個挑戰(zhàn)
當(dāng)前,電信運營商通過多年的信息化建設(shè),已建成各種各樣的業(yè)務(wù)系統(tǒng)和IT支撐系統(tǒng),而隨著業(yè)務(wù)規(guī)模、用戶需求的不斷提升以及移動互聯(lián)網(wǎng)應(yīng)用的快速發(fā)展,在數(shù)據(jù)處理上正面臨著各種挑戰(zhàn)。其存在的問題主要包括5個層面。
一是需要處理的數(shù)據(jù)量日益龐大,難以實現(xiàn)海量數(shù)據(jù)的高效存儲和訪問。電信運營商僅一個省公司一個月的計費清單量就多達(dá)數(shù)十億條記錄,使用傳統(tǒng)的數(shù)據(jù)處理方法效率往往低下乃至不可忍受。而運營數(shù)據(jù)的日報、月報和實時營銷等需求,更是令統(tǒng)計、分析、挖掘、營銷等系統(tǒng)不堪重負(fù)。
二是無法應(yīng)對高并發(fā)讀寫的需求。當(dāng)前的業(yè)務(wù)環(huán)境中,一些營銷優(yōu)惠活動,例如網(wǎng)廳的秒殺活動、iPhone首發(fā)優(yōu)惠辦理等,容易引發(fā)一些難以預(yù)估的短時間內(nèi)極端高并發(fā)讀寫需求,并往往達(dá)到每秒上萬次讀寫請求,這使得傳統(tǒng)技術(shù)難以承受如此巨大的負(fù)載。
三是數(shù)據(jù)模型擴(kuò)展困難。在目前激烈競爭的行業(yè)環(huán)境下,電信業(yè)務(wù)變化頻繁,部分?jǐn)?shù)據(jù)如客戶特征信息、客戶聯(lián)系方式等,經(jīng)常出現(xiàn)數(shù)據(jù)模型擴(kuò)展需求,對傳統(tǒng)的技術(shù)而言,數(shù)據(jù)模型的變更涉及的工作復(fù)雜而龐大。
四是需要處理的數(shù)據(jù)類型趨于多樣化,除了話單這樣的傳統(tǒng)格式化文本之外,還有圖片、音頻甚至視頻等,另外即使是文本,也可能是大段落的文本,難以進(jìn)行格式化處理。
五是大量的中小行業(yè)應(yīng)用服務(wù)器,一方面占用了相當(dāng)規(guī)模的硬件資源和維護(hù)工作量,另一方面對行業(yè)應(yīng)用快速發(fā)展時,傳統(tǒng)的體系架構(gòu)難以方便地實現(xiàn)橫向擴(kuò)展。
內(nèi)部:基礎(chǔ)設(shè)施完善
因此,應(yīng)用大數(shù)據(jù)技術(shù)解決當(dāng)前的各種挑戰(zhàn),對電信運營商有著重要意義。在此過程中電信運營商面臨著什么樣的機(jī)遇和挑戰(zhàn)?可利用SWOT方法(如圖所示)探知。
從企業(yè)內(nèi)部看,電信運營商具備IT基礎(chǔ)設(shè)施完善、資金和人員充足、信息獲取便捷等自身優(yōu)勢。電信運營商從80年代起進(jìn)行信息化建設(shè),目前已建成了業(yè)務(wù)系統(tǒng)、支撐系統(tǒng)等眾多信息化平臺,信息化基礎(chǔ)設(shè)施非常完善,積累了豐富的數(shù)據(jù)。運營商在信息化建設(shè)方面的投入資金每年都達(dá)數(shù)十億元,而且擁有龐大的IT研發(fā)、支撐和運營團(tuán)隊,能為大數(shù)據(jù)技術(shù)的研究、應(yīng)用提供資金和人力的保障。
另外,運營商作為信息服務(wù)的管道,是用戶享用信息服務(wù)的必經(jīng)之路,具備獲取各種信息的天然優(yōu)勢,能夠相對容易地獲取用戶行為數(shù)據(jù)。
當(dāng)然,運營商作為傳統(tǒng)企業(yè),在運作上相對保守,一般傾向于使用比較成熟、可靠的技術(shù),因此對新技術(shù)的研究力度不足,技術(shù)創(chuàng)新能力也有待提高。而同時,運營商作為大型的國企,企業(yè)組織在地域、業(yè)務(wù)和IT等維度的條塊分割比較嚴(yán)重,地域上劃分為全國、省和地市三個層級,業(yè)務(wù)部門劃分為政企客戶、公眾客戶、市場營銷、客服等多個部門,技術(shù)部門也劃分為業(yè)務(wù)網(wǎng)絡(luò)、無線網(wǎng)絡(luò)、支撐系統(tǒng)等多個部門,這些部門之間的互相溝通協(xié)作存在著一定的障礙,而大數(shù)據(jù)應(yīng)用往往要求從客戶的角度綜合統(tǒng)籌各種信息,一般都涉及跨地域、跨部門的協(xié)調(diào)。所有這些都是運營商應(yīng)用大數(shù)據(jù)技術(shù)時需要處理好的內(nèi)部不足。