海量数据|亚马逊云服务助力 丰田互联中国车联网服务落地

【太平洋汽车网 行业频道】丰田互联科技开发有限公司基于亚马逊云服务(AWS)开发的数据湖——Toyota Big Data Center China正式上线。它可以存储、处理上千万辆丰田汽车每天在行驶过程中产生的数十TB数据,推动丰田汽车的车联网解决方案在中国市场大规模落地。
海量数据|亚马逊云服务助力 丰田互联中国车联网服务落地
文章插图
通过对海量数据的存储、分析,Toyota Big Data Center China可以为用户提供各种创新的服务,例如,帮助驾驶员更安全地使用汽车,依据驾驶行为数据帮助车主获得汽车保险折扣等。
从2019年开始,丰田汽车希望在中国市场全面推广车联网服务,为所有新上市的汽车标配了车载数据通信模块(DCM),成功实现在用户同意的情况下将车辆数据全部传输到后台的车联网系统。车联网服务的全面落地,首当其冲面临的就是海量数据的存储、处理和分析问题。丰田汽车2019年在中国全年销量超过162万辆,行驶的车辆每天不断地生成新数据,随着联网汽车数量不断增长,这些汽车每天将产生数十亿条消息,生成TB级的数据。
为了给用户提供更好的车联网服务,丰田互联希望通过搭建数据湖,构建一个能够实时存储、处理、分析数据的管理平台,为稳定、可靠、高效的车联网服务系统打好基础。
AWS在大数据方面有一套完整的解决方案,可以存储任意规模的结构化和非结构化数据,并对原始数据进行查询、处理、实时分析和机器学习等,帮助企业利用数据做出更好的决策。Amazon Simple Storage Service (Amazon S3) 是AWS数据湖方案的核心,具有优异的可伸缩性、高可用性。Amazon S3为实现99.999999999% 的持久性而设计,可以快速、低成本地摄取和存储各种数据。
丰田互联还采用了Amazon Kinesis实时数据流服务、AWS Lambda无服务器计算服务、Amazon Elastic MapReduce大规模并行处理服务等,安全、灵活、高效地完成从实时数据注入、解码到分析、应用的全流程。
同时,丰田汽车的车联网项目是全球性的,中国数据湖系统的架构和平台也需与全球统一。丰田汽车和AWS正在开展全球协作,采用AWS庞大的云服务组合扩展丰田的行驶服务平台,帮助丰田工程师开发、部署和管理下一代数据驱动的行驶服务。丰田在AWS中国区域可以选用与AWS海外区域相同的数据湖解决方案,因此AWS成为丰田互联构建数据湖系统的理想选择。
在AWS技术专家团队的帮助下,丰田互联在5个月内完成了这一项目的开发及部署,并借助AWS强大的云服务和功能大大降低了云资源使用成本。AWS的云原生和托管服务也使丰田互联可以把更多精力放在应用创新上,缩短项目上线时间,减少开发和运维的成本。
海量数据|亚马逊云服务助力 丰田互联中国车联网服务落地】丰田互联的成本节省主要体现在两个方面:其一是云资源使用成本的节省。利用AWS丰富的功能建立起成本优化模型,丰田互联极大地降低了云资源的使用成本。例如,通过制定数据生命周期策略,在指定持续时间之后将数据从Amazon S3移动到Amazon S3 Glacier,从而将数据存储成本降低了6倍,更进一步地将数据从Amazon S3 Glacier移动到Amazon S3 Glacier Deep Archive,成本又降低了4倍。另一方面,采用AWS无服务器架构等技术,实现了架构的自动灵活扩展,降低成本。其二是系统的运维成本大幅度降低,基于AWS构建的业务系统实现了高度自动化运维。