日前,部署在海关总署上海分中心的大数据云平台落成,该平台是金关二期的重点项目之一,主要承载大数据的处理任务。根据相关技术人员测算,未来5年内,中国海关的数据处理量将达到非结构化数据4PB、结构化数据100TB,大数据云平台完全可以满足如此庞大的数据处理需求,成为海关提高监管与服务水平、确保通关现场货运通畅的硬件保障。
智慧海关离不开大数据云平台支撑
海关被誉为“国门”,关系到我国进出境运输、关税征收以及走私缉查等重要任务。随着“金关工程”的推进,我国的海关信息化建设日臻完善。金关二期工程在一期建设的基础上,采用物联网、云计算等新技术,重点建设全国海关监控指挥系统、进出口企业诚信管理系统、加工和保税监管系统、海关物流监控系统等应用系统。
海关大数据云平台是金关二期的重点项目之一,平台部署在上海分中心,主要支撑大数据的处理和运算,提升海关系统对非结构化数据的处理能力,比如视频数据,实现海量数据内在逻辑关系的挖掘和分析。另外,全国通关一体化、关税预测、基于企业信用的快速通过等业务系统的数据也将被整合到该平台中。因而,大数据云平台将成为中国海关的智能中心平台,逐步支持各项业务的智能化升级,在金关工程中处于核心地位。
处理4PB数据,满足五类角色需求
全国1800多个主要通关现场视频监控数据及海关情报等系统数据堪称海量,根据金关工程二期深化设计中各主要项目数据量测算,未来5年的数据量可达到非结构化数据4PB,结构化数据100TB。海关大数据云平台要对这些海量数据进行加工处理以及实时分析,这对云数据中心硬件的计算能力、存储能力和数据吞吐能力提出了很高要求。
不仅如此,海关业务涉及税务、外汇、银行、港务、出入境检验检疫、外经贸等众多部门,应用复杂、规模庞大,为了该平台统一管理和资源灵活调动,基础硬件需要采购同一种型号的服务器。根据平台规划需求,搭建平台的硬件必须同时满足公共管理型服务器、存储计算型服务器、数据处理型服务器、组件服务型服务器和网络型服务器等五类角色需求。
近750台浪潮NF5270M3搭建大数据云平台
在深入了解海关大数据云平台的应用需求后,浪潮采用近750 台双路NF5270M3部署在该平台的57个服务器机柜内,实现网络设备区、虚拟化区、核心组件区、云服务区和负载均衡区等五大功能区。虚拟化区需要服务器实现存储计算功能,为平台提供应用支撑能力;负载均衡区主要负责网络产品服务和安全防护;核心组件区要求服务器提供分析调度和运维管控能力,云服务区负责大数据服务支撑和分析,对外提供服务。
浪潮双路服务器NF5270M3采用模块化设计,硬盘等部件可灵活扩展,在用户应用需要更高性能时可将性能提升到标称值以上,多种灵活的配置选择,满足了一款产品实现公共管理型、存储计算型、数据处理型、组件服务型和网络型等5种平台应用需求,而且也为保证了平台的计算能力、存储能力和数据吞吐能力。
全国1800多个通关现场视频任性存取、实时分析
大数据云平台建成后,能支持数据总量为8PB非结构化数据与160TB结构化数据的存取与分析。海关总署对于业务数据的处理能力从过去的TB级别上升到PB级别,全国1800多个主要通关现场视频监控可以任性地存取,实时分析能力将得到指数级的提升。
不仅如此,部署云平台之后,所有硬件资源实现自动管理和动态分配、部署、配置及回收,使该平台与海关已有软硬件进行整合,实现海关数据大集中,从而有效解决资源利用率低、响应效率低、业务连续性低等诸多问题。通关数据的集中,也将为全国通关一体化打下基础,实现异地报关。
海关负责人表示,海关通,天下通。浪潮的技术支持,成为海关提高监管与服务水平、确保通关现场货运通畅的硬件保障。