“大数据为新财富,价值堪比石油”。大数据之父维克托•迈尔•舍恩伯格则乐观预测,数据列入企业资产负债表只是时间问题。
数据是资产,要发挥数据的价值,对数据资产进行管理需要一整套运营体系。
但是在互联网时代,伴随数据爆炸式的增长,全社会面临越来越大的挑战。
以银行为例,在互联网交易链条中,银行所占比重越来越低,也越来越难以知道客户的消费行为,客户不断流失,维系成本不断攀升。
几乎所有银行都意识到数据作为核心资产的地位,但如何聚合客户在银行内外的种种信息,了解其兴趣、偏好、诉求,从而提供个性化的产品与服务?
大数据技术的出现提供了可能。
任何一家银行都有几十个甚至上百个系统,将其整合起来,实现海量多源异构数据的采集、整合,深入挖掘客户特征、需求,为提供差异化服务和个性化产品、产品创新等提供数据支撑,从而发挥系统与数据的更大价值。
成立于2009年的百分点信息科技有限公司基于长期的技术与实践,形成了自己的理论体系和实际操作框架,推出了“大数据时代全渠道营销管理解决方案”。2016贵阳数博会期间举行的“数据资产化发展论坛”上,百分点副总裁张一帆发表演讲,阐述数据资产管理的方法及实践经验。
发掘大数据的价值
“大数据时代全渠道营销管理解决方案”结合了百分点数据资产,具有跨渠道、跨屏投放并实现企业方数据资产沉淀等特性,可以协助个行业用户进行数据采集、加工处理。
在数据采集方面,百分点采集实时用户行为、业务系统数据和日志数据等方面的数据,其中实时用户行为采集的内容主要是用户行为轨迹,业务系统数据来源主要是CRM、信用卡等业务系统数据,日志数据主要采集Txt、CSV、Excel、XML、Word、PDF、Socket等类型的数据。
在实际工作中,数据质量面临的挑战最多,因为对数据的源头、数据加工处理的过程缺乏了解,在数据量很大的情况下进行分析处理,难以保证其可靠性。
百分点从技术层、管理层到应用层对数据资产进行管理。以管理层为例,按输入管理、处理过程管理和输出管理三个阶段实现,每个阶段都有相应的标准。
在数据分析方面,数据的组织及挖掘已经有很长的发展历程,今天仍然需要重新梳理,尤其是多元异构。海量异构数据组织其特点是多源异构、一盘散沙,不同业务有不同标签需求,没有标准、不成体系,缺乏沟通共同语言。
大数据组织及挖掘的价值是统一多源异构数据,统筹各业务条线的数据需求,标准化、规范化数据体系,成为人、业务和系统沟通的共同语言,实现了可持续可扩展、可规模化应用,其难点在于缺乏统一的数据规范和体系、缺乏伸缩自如的数据架构以及符合业务特点的标签体系、符合业务需求的数据体系。
通过对数据结构分析、数据内容分析和数据关联分析三个步骤,百分点解决数据质量缺乏一致性、完整性、规范性、精确性的问题。
对数据结构分析的过程,是把主流的数据梳理技术整合成完整的、自动的梳理流程,确定表中数据是否一致或符合业务要求;数据内容分析的过程,是利用人工评估和人工抽测的方式深入评估数据的质量,确定哪些数据不精确、不完整和不清楚;数据关联分析的过程,是把数据梳理和质量控制结合起来,形成有效的管理手段,用于分析数据冗余和相似性。
“黑洞系统”整合异构数据,是百分点独特的一项技术。
在数据分析过程中,对字段的管理非常重要,关键字段缺失的数据对业务几乎没有什么价值。百分点“数据探头”可以按照业务需求设置相应的字段,并利用“黑洞系统”配置来定义必选项字段,自动从浏览器端和移动端钻取相关的数据,在黑洞系统中通过FTP上传、连接,确保传输过程中必要的数据得以保证。
定义字段的做法不仅可以有效引进有价值的信息,促进业务工作,而且还可以降低成本——数据太多意味着多到清洗成本太高。
“输入数据时优先考虑规范性,输出数据同时考虑精确性、完整性。”张一帆说。
大数据解决了更快、更强、更便宜的问题,但关键在于如何让业务部门和技术部门非更加密切地合作。数据可视化是这个挑战的得力工具。张一帆指出,可视化管理是每家企业开展信息化工作的重要手段。
在数据安全性方面,张一帆表示,数据安全需要从法律、管理和技术三个层面提供保障。
在法律保障方面,要与各合作伙伴签订数据安全保密协议,与各员工签订数据安全保密协议;在管理保障方面,要内设数据安全管理委会,统一管理数据的输入、加工、输出流程,确定各层数据的访问权限,对各层数据进行加密、解密密钥的设置与管理;在技术保障方面,要做好数据加密和访问控制工作。
在数据运营的过程中,个性化推荐是一个非常重要的步骤。百分点根据用户的全网行为挖掘出的各类偏好,为用户绘制兴趣图谱,用户画像数据驱动个性化推荐。
张一帆介绍了个性化推荐的基本原理,如何根据场景引擎洞察用户的意图。他建议用户建立起一个基于真正营销方面的受众管理平台,根据业务需求,配置受众筛选策略应用,并进行用户群体透视,发掘群体特征。
应用效果明显
“大数据时代全渠道营销管理解决方案”取得了明显的成效。
采用该解决方案的某电子商城导购平台上线后,网站平均客单价增长67.16%,下单转化率提升36.52%,推荐产生订单占比30.21%,推荐产生订单金额占比38.72%,动销比增长72.08%,推荐转化率比全站转化率高1.78倍。这个基于大数据的个性化电子商城导购策略有效提升网站营销效能。
为了给一款手机官网引流以提升销量,某知名手机制造产商与百分点合作,整合了第一方与第三方数据,以人口属性、消费偏好、阅读偏好、品牌偏好等行为特征最终筛选并定位目标人群进行指定投放,同时辅以全方位实时优化。在半个月的时间里,网站点击率提升30%,转化率提升了55%。
而在银行方面,百分点通过在银行官网、APP上部署采集访问用户实时行为的代码,利用大数据文本分析和挖掘技术,分析客户的长期、短期偏好和需求,预测当下和潜在偏好和需求,让银行了解用户在网上的行为特征、需求,拉近与用户的距离,为客户推荐个性化服务或资讯。利用大数据技术,银行更深入了解用户,构建银行自身的核心竞争力,有效的控制银行风险,实现以用户为中心的战略转型。
大数据时代的数据资产管理的新挑战
对比大数据时代的数据资产管理和传统管理的区别,张一帆表示,大数据时代不再侧重交易数据,数据质量更加重要;数据面对的对象已经深入到了企业内部甚至延伸到了外部的合作伙伴,所以数据质量很重要。同样重要的还有数据的可视化管理和流动性。
七年来,百分点一直专注于满足市场对海量异构数据的融合与应用需求,使企业能高效、便捷地进行数据资产管理和价值实现。
目前,百分点已为近2000家互联网及实体企业提供大数据技术平台搭建和大数据驱动的SaaS应用,客户涵盖制造、金融、汽车、零售、快消、电商、媒体、政府等行业的龙头企业,同时已经与微软、华为、惠普等国际IT巨头开展战略合作,共同为客户设计解台,高性能的实时与离线计算能力和丰富的算法库及商业模型;应用上,百分点基于三大核心引擎的全业务驱动产品体系,帮助企业深入挖掘大数据的商业价值;数据上,百分点沉淀了5.5亿受众画像和1亿的商品画像,致力于在保障用户隐私及数据安全的前提下融合数据,推动数据流转,消除企业信息孤岛。
2015年9月,百分点完成了由光大证券领投的4亿元D轮融资,未来将进一步深入行业垂直化解决方案,并逐步推动企业向云端服务迁移。