近年來，大數(shù)據(jù)、云計算、人工智能和區(qū)塊鏈等技術(shù)如雨后春筍般涌現(xiàn)，以眾安為代表的互聯(lián)網(wǎng)保險公司橫空出世，BATJ等互聯(lián)網(wǎng)公司紛紛涉足保險業(yè)，使得市場競爭不斷加劇。與此同時，移動互聯(lián)時代下，保險客戶的行為以及保險營銷生態(tài)都發(fā)生了巨大變化。

保險業(yè)轉(zhuǎn)型迫在眉睫

中國保險行業(yè)傳統(tǒng)發(fā)展模式面臨發(fā)展瓶頸，傳統(tǒng)保險企業(yè)的轉(zhuǎn)型升級迫在眉睫。在這樣的一個轉(zhuǎn)型窗口期，誰先抓住時代、抓住客戶，誰就能獲得更好的生存和發(fā)展空間，否則將面臨出局的風(fēng)險。保險業(yè)要想在強(qiáng)敵環(huán)伺的移動互聯(lián)網(wǎng)時代生存和發(fā)展，必須開發(fā)更為合適的產(chǎn)品，提供更為優(yōu)質(zhì)貼心的服務(wù)，以滿足客戶的需求。而傳統(tǒng)的營銷、承保、理賠、后援服務(wù)等，都面臨新時代的挑戰(zhàn)，需要科技手段為其全面賦能。

2017年底，在“科技驅(qū)動的客戶綜合經(jīng)營”戰(zhàn)略導(dǎo)向下，中國大地保險創(chuàng)新孵化中心應(yīng)運而生，該中心旨在落實公司科技驅(qū)動的戰(zhàn)略目標(biāo)，從而在變革時期承接對創(chuàng)新業(yè)務(wù)的持續(xù)探索。據(jù)悉，中國大地保險創(chuàng)新孵化中心的職能大致分為四大板塊：即行業(yè)研究，創(chuàng)新管理，金融科技，大數(shù)據(jù)及人工智能應(yīng)用。

中國大地保險大數(shù)據(jù)業(yè)務(wù)模型實例

在大數(shù)據(jù)及人工智能應(yīng)用領(lǐng)域，中國大地保險創(chuàng)新孵化中心項下的數(shù)據(jù)管理應(yīng)用中心將大數(shù)據(jù)技術(shù)應(yīng)用于營銷獲客、風(fēng)險控制、精準(zhǔn)營銷等領(lǐng)域，輔助決策，為業(yè)務(wù)全面賦能。

數(shù)據(jù)管理應(yīng)用中心列舉了三類業(yè)務(wù)模型實例：

• 1、數(shù)據(jù)管理應(yīng)用中心構(gòu)建了家用車?yán)m(xù)保預(yù)測模型，在車輛保險到期前進(jìn)行續(xù)保預(yù)測，指導(dǎo)銷售人員有針對性的開展續(xù)保工作；
• 2、開發(fā)了基于SNA社交網(wǎng)絡(luò)的理賠反欺詐模型，用于公司車險理賠反欺詐管理，已成功追償多筆賠款；
• 3、開發(fā)了銷售人員產(chǎn)能分析模型，用于銷售人員分群管理，幫助業(yè)務(wù)線更好地進(jìn)行銷售人員管理。

保險業(yè)的數(shù)據(jù)特點及需求

與互聯(lián)網(wǎng)大數(shù)據(jù)海量、高頻、數(shù)據(jù)復(fù)雜度高的特點不同，保險業(yè)的數(shù)據(jù)以保險交易數(shù)據(jù)為主，例如報價、承保、繳費、理賠等數(shù)據(jù)，以官網(wǎng)、公眾號、App等平臺獲取的客戶行為數(shù)據(jù)為輔，這些數(shù)據(jù)的特點是結(jié)構(gòu)化、準(zhǔn)確、低頻。

保險業(yè)的數(shù)據(jù)來自于業(yè)務(wù)的各個環(huán)節(jié)，很容易形成數(shù)據(jù)孤島，因此保險企業(yè)做大數(shù)據(jù)分析時對數(shù)據(jù)分析技術(shù)和工具的要求相對較高。

首先，在數(shù)據(jù)整合和清洗環(huán)節(jié)，數(shù)據(jù)的整合工作需要跨越多個平臺，涉及多種數(shù)據(jù)類型，需要高兼容性的數(shù)據(jù)處理工具高效地將各類數(shù)據(jù)集成起來。

其次，當(dāng)多個業(yè)務(wù)環(huán)節(jié)的數(shù)據(jù)被整合在一起之后，海量的金融數(shù)據(jù)會變得高維、稀疏，因此在數(shù)據(jù)探索、建模階段，傳統(tǒng)的基于單臺服務(wù)器的數(shù)據(jù)分析工具難以滿足保險行業(yè)超高量級的分析建模需求，需要具有大規(guī)模分布式處理能力的數(shù)據(jù)分析工具進(jìn)行支撐。

保險大數(shù)據(jù)架構(gòu)及方案的選擇

Hadoop生態(tài)系統(tǒng)具有高可靠性、高容錯性、高可拓展性、高效性以及單位計算能力低成本的特點，通過數(shù)據(jù)多拷貝、冗余存儲的方式，能夠滿足金融行業(yè)對數(shù)據(jù)處理工具高可靠性和高容錯性的要求。

• 在擴(kuò)展性方面，傳統(tǒng)的數(shù)據(jù)處理工具難以實現(xiàn)處理能力隨著數(shù)據(jù)量的增長而線性拓展，Hadoop生態(tài)系統(tǒng)在線性擴(kuò)展方面有較強(qiáng)的優(yōu)勢，能夠充分滿足企業(yè)業(yè)務(wù)增長的需求。
• 在高效性方面，作為并行分布式計算平臺，Hadoop采用分布式存儲和分布式處理兩大核心技術(shù)，能夠高效地處理PB級數(shù)據(jù)。
• 在單位計算能力的成本方面，Hadoop能夠運行在使用Linux操作系統(tǒng)的X86服務(wù)器上，硬件成本更低，結(jié)合其高可拓展性的優(yōu)勢，能夠大大降低企業(yè)大規(guī)模數(shù)據(jù)處理的成本。

Cloudera是Hadoop生態(tài)系統(tǒng)中領(lǐng)先的大數(shù)據(jù)解決方案供應(yīng)商，也是全球知名的企業(yè)級數(shù)據(jù)管理和數(shù)據(jù)分析平臺提供商。Cloudera的CDH是最成熟、穩(wěn)定的Hadoop商業(yè)發(fā)布版本之一，擁有大量企業(yè)級大數(shù)據(jù)部署案例，并且能夠提供專業(yè)、全面的技術(shù)支持服務(wù)。

因此，經(jīng)過多個方面的綜合考量，大地保險數(shù)據(jù)管理應(yīng)用中心決定使用Hadoop平臺作為整體架構(gòu)，選擇Cloudera成為其合作伙伴，搭建大數(shù)據(jù)平臺，將大數(shù)據(jù)技術(shù)應(yīng)用到極致，為企業(yè)業(yè)務(wù)全面賦能。

中國大地保險大數(shù)據(jù)平臺部署策略

在軟件方面，中國大地保險已經(jīng)于2017年引入Cloudera的全套大數(shù)據(jù)解決方案，并在此基礎(chǔ)上進(jìn)行了一定的定制化改造和封裝，使其在應(yīng)用中更貼合大地保險的業(yè)務(wù)需求。目前中國大地保險的大數(shù)據(jù)集群已部署20+臺服務(wù)器，并計劃在2019年將集群擴(kuò)充到50+臺。

在實時數(shù)據(jù)處理方面，中國大地保險采用Flume+Kafka+Spark streaming+Hbase的技術(shù)方案，實現(xiàn)數(shù)據(jù)從前端的采集、傳遞到中臺的計算、展示，最后到后臺進(jìn)行存儲。在離線大批量數(shù)據(jù)處理方面，中國大地保險采用Sqoop+Spark+Hive/Parquet的技術(shù)組合，實現(xiàn)數(shù)據(jù)跨平臺同步、大批量處理和存儲。

在OLAP(On-Line Analysis Processing)在線分析方面，由于Impala的查詢性能強(qiáng)悍，因此中國大地保險使用Impala進(jìn)行數(shù)據(jù)的快速理解、分析。在數(shù)據(jù)建模方面，使用Spark中的MLlib來進(jìn)行大規(guī)模數(shù)據(jù)的分布式機(jī)器學(xué)習(xí)、建模。

目前，中國大地保險已明確了“線上化、數(shù)字化、智能化”的年度工作目標(biāo)，將數(shù)字化轉(zhuǎn)型列入公司的戰(zhàn)略層面，圍繞“移動、云、大數(shù)據(jù)”等新技術(shù)，逐步提升企業(yè)的數(shù)字化水平。慧都大數(shù)據(jù)專業(yè)團(tuán)隊為企業(yè)提供Cloudera大數(shù)據(jù)平臺搭建，免費業(yè)務(wù)咨詢，定制開發(fā)等完整服務(wù)，快速、輕松、低成本將任何Hadoop集群從試用階段轉(zhuǎn)移到生產(chǎn)階段。