《通关无纸化电子随附单据数据存储方案》由会员分享，可在线阅读，更多相关《通关无纸化电子随附单据数据存储方案（67页珍藏版）》请在金锄头文库上搜索。
1、2022年-2023年建筑工程管理行业文档 齐鲁斌创作通关无纸化电子随附单据数据存储方案目录第一章前言4第二章现状与问题分析42.1.现状分析42.1.1.信息中心42.1.2.数据中心72.2.试运行情况102.2.1.信息中心102.2.2.1存储102.2.2.2网络102.2.2.数据中心112.2.2.1存储112.2.2.2网络112.3.问题分析122.3.1.信息中心面临的问题122.3.2.数据中心面临的问题132.3.3.直属海关面临的问题13第三章需求分析143.1.业务需求143.1.1.数据存留143.1.2.存储容量143.1.3.读写I/O分析153.1.4.磁盘
2、并发数分析153.2.开发需求153.2.1.接口需求153.2.2.迁移改造需求153.3.运维需求163.3.1.管理工具163.3.2.生命周期管理163.3.3.监控工具集成163.3.4.设备扩展性163.3.5.业务连续性173.3.6.复制迁移173.3.7.数据备份173.3.8.数据质量173.3.9.数据安全173.3.10.机房环境需求173.3.11.技能需求173.3.12.升级支持173.3.13.售后服务支持水平183.4.设备安全需求183.5.数据安全需求183.6.网络需求183.6.1.网络背景流量183.6.2.无纸化报关传输流量193.6.3.无纸化调
3、阅流量213.6.4.高清无纸化报关传输流量223.7.其它需求233.7.1.成本233.7.2.产品成熟度23第四章规划总体结构234.1.方案一：集中存放模式234.1.1.总体结构图234.1.2.优点254.1.3.缺点264.1.4.网络估算264.1.5.工作量估算314.2.方案二：分布存放模式324.2.1.总体结构图324.2.2.优点344.2.3.缺点344.2.4.网络估算354.2.5.工作量估算364.3.方案三：集中+分布存放模式374.3.1.模式1：准实时下发模式374.3.2.模式2：分时下发模式434.3.3.模式3：非下发模式464.4.倾向性建议50
4、4.5.运维管理514.5.1.备份管理514.5.2.数据同步524.5.3.容灾切换524.6.数据管理52第五章可行性存储方案及分析535.1.方案一：可横向扩展的集群式NAS系统535.1.1.简介535.1.2.方案架构图535.1.3.特性545.1.4.方案分析IBM SONAS555.1.5.方案分析EMC Isilon565.2.方案二：成熟型内容管理路线575.2.1.简介575.2.2.方案架构图575.2.3.特性575.2.4.方案分析IBM ECM585.2.5.方案分析Oracle WebCenter Content595.2.6.方案分析EMC Document
5、um595.3.方案三: 分布式存储+计算605.3.1.简介605.3.2.方案架构图615.3.3.特性615.3.4.方案分析EMC MapR625.3.5.方案分析天云科技 Hadoop635.3.6.方案分析Intel Hadoop645.4.方案利弊对比665.5.倾向性方案67第一章 前言通关作业无纸化改革试点是2012年全国海关关长会议确定的重点工作。根据监管司 海关通关作业无纸化改革实施方案（试行）要求确定的改革实施步骤，于2012年8月，第一期选定12个海关的不同种类的业务类型进行试点、2013年将进一步深化通关无纸化作业改革试点、 2014年将深入推进并将于2015年在全
6、国海关全面推广实施。根据上面的业务改革实施步骤，第一期试点的设计的文件存储系统将无法满足进一步的业务需求，需要建立能支撑通关无纸化业务改革在全国海关全面推广实施后的通关无纸化电子随附单据电子数据存储系统。本方案是在科技司牵头下，信息中心、数据中心、上海海关成立专题工作组，对今后存储、网络等需求进行综合评估，并对业界相关的技术和产品进行调研，初步形成的电子随附单据数据存储方案，本方案的实施将为今后通关无纸化全面推广提供基础的技术支撑。第二章 现状与问题分析2.1. 现状分析2.1.1. 信息中心2.1.1.1. 文件系统文件系统结构如下：整个文件系统分元数据的存储、非结构化数据文件存储、和对文件
7、系统的访问三部分，其中元数据是结构化数据（包括服务器的配置信息和非结构化数据文件信息），放入到Oracle数据库中，非结构化数据文件放入文件服务器中，其中文件服务器是用EMC VMAXe的硬件存储。H2010客户端需要调阅随附单据时，对文件系统进行访问。实现上是由H2010客户端通过中间层服务器发送请求，中间层向客户端返回文件地址和时间戳，客户端对以上信息及用户信息、请求IP加签，向缓冲文件服务器发送文件请求。缓冲文件服务器和总署级文件服务器上，设立WEB站点，接收文件请求。收到文件请求后，先对请求的内容进行验证，如果能够通过验证且在时间戳后的有效时间内，将对请求内容进行响应。首先，缓冲文件服
8、务器检索本服务器是否有相应的文件，如果没有，则进一步向上级（总署级）文件服务器发送请求，将获得的文件在缓冲文件服务器缓冲，并返回给请求方。对于非业务量大的海关， 客户端向中间层服务器发送请求，由中间层服务器直接向总署Web服务器发送请求文件，并返回给客户端。2.1.1.2. 设备列表硬件名称硬件配置数量软件及版本说明存储EMC VMAXe可用容量10.7TB1文件服务器CPU：4路8核内存：64GB2OS：Windows2008R2 64位Cluster信息中心可扩展（整组增加）WEB服务器CPU ：4路8核内存：64GB2OS：Windows2008R2 64位NLB信息中心可扩展MQ服务器
9、CPU：4路4核内存：8GB2OS：Windows2008R2 64位IBMMQ 7.0Cluster信息中心不可扩展，但能按通道拆分ESB数据库服务器CPU：4路4核内存：32GB2OS：Windows2008R2 64位Cluster信息中心不可扩展ESB应用服务器虚机 CPU：4核内存：16GB2OS：Windows2008R2 64位NLB信息中心可扩展ESB Biztalk服务器CPU ：4路8核内存：64GB2OS：Windows2008R2 64位Group信息中心可扩展2.1.2. 数据中心2.1.2.1. 存储2.1.2.1.1. 部署结构目前无纸通关项目中上传服务器在德胜和
10、亦庄两个机房都有部署，但数据库和后台程序只在亦庄机房有部署，拓扑如下：2.1.2.1.2. 设备列表硬件名称硬件配置数量软件及版本说明上传服务器CPU：2.8G*4内存：8G硬盘：80G8Os：linux64位 中标麒麟5.4内核版本2.6.18-164Weblogic10Jdk1.6亦庄4台、德胜4台随附单证MQ服务器IBM 750平台CPU ：8个内存16G本地盘：120G2Os：AIX6.1.0.6-sp8MQ：ibmmq6.0部署在亦庄NFS SERVERIBM 5608CPU32G内存2OS：AIX5.3.0.11-sp10 部署在亦庄，其中一台为冷备机存储IBM-DS8300,存储
11、容量10T1部署在亦庄传输用加密机Sjy362OS: linux部署在亦庄2.1.2.2. 网络目前数据中心为两地三中心的网络结构，北京、上海为三个核心机房的所在地，其中北京为同城主备两个机房，上海为异地容灾机房。各个分中心都是双线上联至数据中心，北方十省的分中心采用联通、电信各一条线路的方式连接到北京同城主备两个机房，南方的分中心使用双电信线路，一条连接到北京，另一条连接到上海。绝大部分情况下每个分中心上联数据中心的带宽都是2M，南方的分中心主用至主运行机房的电信线路，北方十省的分中心通常主用至同城备份机房的联通线路。为了确保无纸化通关项目的顺利进行，数据中心计划将南京、拱北、杭州、北京、天
12、津、福州等6个试点分中心上联至数据中心主用线路的带宽扩容至10M。数据中心的同城主备机房与H2010系统的北京、广东节点都有互联，除今年7月将主运行机房与H2010系统北京节点（金宝街）的互联线路升级到为100M裸光纤外，所有与H2010互联的线路都是4M SDH专线。2.1.2.2.1. NFS Server设计2.1.2.1.1. SAN结构NFS服务器采用两台IBM 小型机P560,两台服务器互为主备关系，需要手工切换，存储采用IBM DS8300，可用空间10TB，另外新采购EMC存储一台，裸容量为80T，可在后期数据量上升时挂载到NFS服务器上。拓扑结构如下： 2.1.2.1.2.
13、文件系统设计NFS Server文件系统上传服务器挂载点备注/shanghai(1TB)/shenzhen(1TB)/nanjing(1TB)/huangpu(1TB)/other(1TB)/edoc/2200/edoc/5300/edoc/2300/edoc/5200/edoc先期每个文件系统预分配空间1TB2.2. 试运行情况2.2.1. 信息中心2.2.2.1 存储截至到12月7日24时，通关无纸化项目自上线以来，系统运行基本正常。总共申报通关无纸化报关单253840份，随附单据（pdf文件）共518789个，存储占用约47G（47417M），存储相关的磁盘读写I/O、文件服务器及WEB
14、服务器CPU、内存资源空闲。2.2.2.2 网络在无纸化通关项目试运行的20几天中，全国海关骨干网运行情况较为良好。取试点前一个普通工作日（2月28日）的上午10:00至11:00业务高峰期一小时流量平均值，再取试点最近一个月（11月13日日至12月13日）中每天上午10:00至11:00业务高峰期流量最大一天的一小时流量平均值，得到的对比表如下，从整体上看，试点海关的线路流量增长不明显，骨干网目前带宽现状可以承载试点应用的流量。单次样本具有随机性，不可简单直接相减计算差值，仅用于概要反映整体变化情况。关区名称运行网带宽M试点上线前流量M试点上线后流量M1北京关区期间由2M扩容至8M1.53.042天津关区期间由4M扩容至8M3.92.643上海
