2020年11月5日,近期,丰田互联(北京)科技开发有限公司(丰田互联)基于亚马逊云服务(AWS)开发的数据湖——Toyota Big Data Center China正式上线。它可以存储、处理上千万辆丰田汽车每天在行驶过程中产生的数十TB数据,推动丰田汽车的车联网解决方案在中国市场大规模落地。通过对海量数据的存储、分析,Toyota Big Data Center China可以为用户提供各种创新的服务,例如,帮助驾驶员更安全地使用汽车,依据驾驶行为数据帮助车主获得汽车保险折扣等。在AWS技术专家团队的帮助下,丰田互联在5个月内完成了这一项目的开发及部署,并借助AWS强大的云服务和功能大大降低了云资源使用成本。
从2019年开始,丰田汽车希望在中国市场全面推广车联网服务,为所有新上市的汽车标配了车载数据通信模块(DCM),成功实现在用户同意的情况下将车辆数据全部传输到后台的车联网系统。车联网服务的全面落地,首当其冲面临的就是海量数据的存储、处理和分析问题。丰田汽车2019年在中国全年销量超过162万辆,中国市场保有量超过1115万辆。行驶的车辆每天不断地生成新数据,随着联网汽车数量不断增长,这些汽车每天将产生数十亿条消息,生成TB级的数据。为了给用户提供更好的车联网服务,丰田互联希望通过搭建数据湖,构建一个能够实时存储、处理、分析数据的管理平台,为稳定、可靠、高效的车联网服务系统打好基础。
AWS在大数据方面有一套完整的解决方案,可以存储任意规模的结构化和非结构化数据,并对原始数据进行查询、处理、实时分析和机器学习等,帮助企业利用数据做出更好的决策。Amazon Simple Storage Service (Amazon S3) 是AWS数据湖方案的核心,具有优异的可伸缩性、高可用性。Amazon S3为实现99.999999999% 的持久性而设计,可以快速、低成本地摄取和存储各种数据。丰田互联还采用了Amazon Kinesis实时数据流服务、AWS Lambda无服务器计算服务、Amazon Elastic MapReduce大规模并行处理服务等,安全、灵活、高效地完成从实时数据注入、解码到分析、应用的全流程。
同时,丰田汽车的车联网项目是全球性的,中国数据湖系统的架构和平台也需与全球统一。丰田汽车和AWS正在开展全球协作,采用AWS庞大的云服务组合扩展丰田的行驶服务平台,帮助丰田工程师开发、部署和管理下一代数据驱动的行驶服务。丰田在AWS中国区域可以选用与AWS海外区域相同的数据湖解决方案,因此AWS成为丰田互联构建数据湖系统的理想选择。
此外,AWS的云原生和托管服务也使丰田互联可以把更多精力放在应用创新上,缩短项目上线时间,减少开发和运维的成本。丰田互联的成本节省主要体现在两个方面:其一是云资源使用成本的节省。利用AWS丰富的功能建立起成本优化模型,丰田互联极大地降低了云资源的使用成本。例如,通过制定数据生命周期策略,在指定持续时间之后将数据从Amazon S3移动到Amazon S3 Glacier,从而将数据存储成本降低了6倍,更进一步地将数据从Amazon S3 Glacier移动到Amazon S3 Glacier Deep Archive,成本又降低了4倍。另一方面,采用AWS无服务器架构等技术,实现了架构的自动灵活扩展,降低成本。其二是系统的运维成本大幅度降低,基于AWS构建的业务系统实现了高度自动化运维。
丰田互联副总经理光武小叶子介绍说,“数据已经成为企业的血液,善用数据,车联网将引领未来出行方式的变革。依托AWS丰富而强大的大数据分析服务,Toyota Big Data Center China能够简化开发,快速进入市场,实现实时接收、存储和处理PB级的关系及非关系型数据,助力丰田汽车为中国用户提供一流的车联网服务。我们也将借助丰田在全球与AWS针对未来出行技术的进一步探索,不断深化与AWS在中国的合作,携手加速创新,更好地服务中国用户。”
“AWS在与全球车联网、自动驾驶等领域的客户的合作中形成了深厚的积累。我们看到,全球的汽车行业客户正在利用云、大数据、人工智能和机器学习、物联网等技术改变其运营模式,并通过数据加速产品开发、优化制造流程和改善客户体验。”AWS大中华区企业业务拓展部总经理凌琦表示,“利用AWS的全球优势,我们在中国也在加大投入,深耕汽车行业,助力客户进行数字化转型和创新。丰田互联借助AWS广泛而深入的云服务在车联网领域的创新探索,对整个汽车行业以及众多其它行业,都有着重要的借鉴意义。”