《县级版本数据处理简介课件》由会员分享,可在线阅读,更多相关《县级版本数据处理简介课件(43页珍藏版)》请在金锄头文库上搜索。
1、县级版本数据处理简介任延洋主要内容A.软件安装和结构说明B.程序配置C.系统维护D.常见问题解决A.软件安装和结构说明原始数据环境说明软件安装物理结构说明原始数据环境说明原始数据环境说明软件安装和结构说明原始数据环境说明原始数据的访问方式方式有FTP和虚盘方式两种:FTP方式:数据存储在处理程序可以访问的FTP 服务器上。虚盘方式:数据存储在处理程序可以访问的虚拟硬盘或者本地硬盘上。原始数据环境说明软件安装软件安装软件安装和结构说明软件安装将压缩包解压到本地得到软件包 软件包是指包含:bin 、datatran、ini、localxml、 log等子文件夹的文件夹。软件包直接放在硬盘根目录下待
2、用注意注意:如果存储路径太深容易导致处理程序无法正常运行。物理结构说明物理结构说明软件安装和结构说明安装包说明软件安装完成后显示如下图所示目录结构I.Bin:存放数据处理应用程序II.Ini:存放系统配置文件III.Localxml:存放要处理的数据的描述文件IV.Datatran:存放数据处理程序安装包说明-binBin下主要包含以下常用应该程序:I.MicapsDataServerConfig.exe:数据服务器配置端II.MicapsDataRecoverShedule.exe:数据恢复程序III.MicapsDataServerWatch.exe:数据服务器监视程序IV.UpdateC
3、onfig.exe:配置更新程序B.程序配置初始化配置自动站入库配置土壤水分数据配置闪电资料配置初始化配置初始化配置系统配置初始化配置启动bin下的MicapsDataServerConfig.exe初始化配置点击“安装初始化配置”打开如下窗口初始化配置数据访问方式-FTP注意:根目录为登录ftp后访问到数据文件夹的路径并且区分大小写。最后的斜杠必须为/初始化配置数据访问方式-虚盘注意:虚盘可以为远程虚拟硬盘,也可以为本机文件路径。此处要配置路径可以与具体数据连接为完整路径。初始化配置目录信息目录信息:I.原始数据存放目录原始数据存放目录:该目录为处理程序运行时需要先将要处理的文件获取到指定目
4、录下进行处理。拷贝到该目录的文件程序会定期维护删除。II.原始数据备份存放根目录原始数据备份存放根目录:该目录用来备份原始数据存放目录中的文件。运行备份软件进行备份。注意:该目录即使不用也必须配置III.产品数据存放根目录产品数据存放根目录:该目录为处理程序处理生成的产品数据存放的根目录IV.产品数据备份存放根目录产品数据备份存放根目录:给目录用来备份产品数据存放根目录中的文件。处理程序将自动备份产品数据到这个目录,默认为00点备份,向前备份24小时资料。初始化配置I.在初始化窗口完成相关项配置点击保存按钮II.关闭Micaps数据服务器配置端窗口,安装初始化配置即完成了自动站入库配置自动站入
5、库配置系统配置自动站入库配置功能说明:将CMACAST下发或者本地区域站的Z格式文件解码并且存入SQLLITE数据库文件。提供给网络版客户端访问。自动站入库配置I.调度配置文件:localxml下的AWSDB_XXXX.xml文件注意:该配置文件后缀为各省代码II.后处理文件(存放在在datatran文件夹下): 后处理脚本:awsDb.bat后处理程序:AwsMessageParser.exe配置文件:awsMessageProcinfoDB.xml自动站入库配置awsDb.bat说明说明:I.AwsMessageParser.exe:处理程序II.awsMessageProcinfoDB.
6、xml :配置文件III.%1 :原始数据目录IV.%2 :产品目录V.%3 :时间参数VI.-20:时间参数偏移量自动站入库配置awsMessageProcinfoDB.xml说明说明:serial-all-hour-sqlite,rolling-simple-sqlite,rolling-Warning-sqlite /当前指定处理的程序任务 / 任务项名称5 /参与运行的时间范围sqlite /输出的产品类型 /数据服务器IP TAB_LocalHourAWSyyyyMMddhh0000.db /对于SQLITE为文件名TAB_LocalHourAWS /数据库中的表名称 / 指定站点文
7、件serial /运算方式/sqlit_Data_E/ /文件输出路径all/输出要素指定土壤水分配置土壤水分配置系统配置土壤水分配置功能说明:将CMACAST下发或者本地土壤水分原始报文转为MICAPS 3类数据格式。土壤水分配置I.调度配置文件:localxml下的soil.xml文件注意:该配置文件后缀为各省代码II.后处理文件(存放在在datatran文件夹下): 后处理脚本:clsoil.bat后处理程序:soil.exe配置文件:soilconfig.ini土壤水分配置clsoil.bat说明说明:I.soil.exe 处理程序II.soilconfig.ini 配置文件III.%
8、1 原始数据目录IV.%2micapsdatasoil_e 产品输出目录V.%3 时间参数VI.30 时间偏移量土壤水分配置soilconfig.ini说明说明:NAME: SOIL 数据类型说明filename: Z_AGME_C_?_yyyymmddhh*_O_ASM-FTM.txt 文件名模板elenum: 20 配置项数量1 要素编码 0-10cm土壤体积含水量 文件说明 SWC-p 输出目录 0.1乘除系数 0 加减系数 10 层闪电定位处理配置闪电定位处理配置系统配置闪电定位处理配置功能说明:将CMACAST下发或者本地闪电原始报文转为MICAPS 41类闪电格式。闪电定位处理配置
9、I.调度配置文件:localxml下的soil.xml文件注意:该配置文件后缀为各省代码II.后处理文件(存放在在datatran文件夹下): 后处理脚本:cllpd.bat后处理程序:LightningMerge.exe配置文件:LightningMerge_config.ini闪电定位处理配置cllpd.bat说明说明:I.set yearmonday=%3 II.set ymd=%yearmonday:0,8% 截取时间III.LightningMerge 处理程序IV.%1 原始数据V.%2micapsdatalpd_e 输出产品目录VI.%ymd% 时间参数VII.120 时间偏移量
10、C.系统维护启动数据处理数据补充调用处理产品目录和原始数据存放目录定时清除启动数据处理双击MicapsDataSchedule.exe程序,打开如下窗口即启动处理程序:数据补充调用出来数据补充调用出来系统维护数据补充调用处理双击MicapsDataRecoverShedule.exe数据补充调用处理I.默认情况下用户只需要选择从CMACAST服务器数据恢复II.设置起始恢复点,即用户想从哪个时间开始恢复。例如:2012030508 即恢复数据的起始点为2012年03月05日08时III.恢复时长:即恢复从起始恢复点之后多少小时的数据,此处输入的数字单位为小时IV.数据类型:即想恢复哪类数据,可
11、以从下拉列表中选择。可以选择全部V.本地数据所在目录:当选择“从本地原始数据恢复”时才需要设置此项。一般情况下不需要填写此项内容。VI.所有输入完成后点击“恢复数据”按钮,程序即可根据设置开始恢复数据。注意:模式数据必须设置整天时长。例如0点为起始24小时时长产品目录和原始数据存放目录定产品目录和原始数据存放目录定时清除时清除系统维护产品目录和原始数据存放目录定时清除I.在datatran文件夹下找到clclear.bat文件II.用文本编辑方式打开该文件,文件内容如下所示 rem %1 表示原始数据 %2表示产品数据存放的根目录 echo off set oldcd=%cd% set exe
12、dir=%dp0 cd %exedir% cf %1 120 cf %2 120 del gg?.dat del dm?.dat cf ./log 120 cd %oldcd%I.文件中对应的 %1 表示原始数据 %2表示产品数据存放的根目录,120为对应文件夹下的文件保留时间单位是小时,用户可以根据自己的需要自行修改这个时间。II.用户如果需要对每个目录单独设置,要删除原来的总目录的清除语句。针对该目录下的子目录添加如下语句即可,语句意义与步骤2中相同。使用小提示I.系统所用的时间均为北京时II.数据处理的脚本采用了%1,%2之类的关键字,表示传入的参数异常处理I.大量采用bat后处理脚本方式,某项数据处理程序出现异常,不影响整个数据处理II.对出现异常进行截屏,并对数据服务器目前使用的CPU、内存进行截屏反馈给我们版本更新I.替换新版本中的datatranII.可以完全或者部分替换localxml中的文件III.保留原有ini文件夹下内容