14个大数据专业词汇随着大数据技术的不断提高，大数据应用的不断普及，大数据与各行各业的关系越来 越紧密大数据行业充斥着大量的专业词汇，准确掌握和了解这些词汇的含义，有助于更好 的理解大数据，更好地利用大数据技术本文整理了以数据处理为中心的14个大数据专业 词汇，一起来看看吧本地数据库(LDB/Local Data Base)本地数据库是指驻留于运行客户应用程序的机器的数据库本地数据库位于本地磁盘 或局域网典型的本地数据库有Paradox> dBASE、FoxPro和ACCCSS数据采集(Data Acquisition, DAQ)数据采集又称数据获取，将被测试对象的各种参量通过各种传感器做适当转换后，再 经过信号调理、采样、量化、编码、传输等步骤传递到控制器的过程数据采集的一般步骤：①用传感器感受各种物理量，并把它们转换成电信号;②通过 A/D转换，模拟量的数据转变成数字量的数据;③数据的记录，打印输出或存入磁盘文件 ④生产厂商为该采集系统编制的专用程序，常用于大型专用系统;⑤固化的采集程序，常用 于小型专用系统;⑥利用生产厂商提供的软件工具，用户自行编制的采集程序，主要用于组 合式系统。
数据模型(Data model)数据模型是现实世界数据特征的抽象，用于描述一组数据的概念和定义数据模型是 数据库中数据的存储方式，是数据库系统的基础在数据库中，数据的物理结构又称数据的 存储结构，就是数据元素在计算机存储器中的表示及其配置;数据的逻辑结构则是指数据元 素之间的逻辑关系，它是数据在用户或程序员面前的表现形式，数据的存储结构不一定与逻 辑结构一致数据整理(Data Cleansing)数据整理是对调查、观察、实验等研究活动中所搜集到的资料进行检验、归类编码和 数字编码的过程，是数据统计分析的基础数据处理(Data Handling)数据处理是指对数据(包括数值的和非数值的)进行分析和加工的技术过程也就是对 数据的采集、存储、检索、加工、变换和传输，将数据转换为信息的过程数据压缩(Data Compression)数据压缩是指在不丢失有用信息的前提下，缩减数据量以减少数据的存储空间，提高 其传输、存储和处理效率，或按照一定的算法对数据进行重新组织，减少数据的冗余和存储 的空间的一种技术方法数据恢复(Data Recovery)数据恢复是指通过技术手段，将保存在台式机硬盘、笔记本硬盘、服务器硬盘、移动 硬盘、U盘等等设备上由于各种原因导致损伤或丢失的数据进行抢救和恢复的技术。
数据集成(Data Integration)数据集成是把不同来源、格式、特点性质的数据在逻辑上或物理上有机地集中，从而 为企业提供全面的数据共享数据集成维护了数据源整体上的数据一致性、提高信息共享利 用的效率数据迁移(Data Migration)数据迁移又称分级存储管理，是一种将离线存储与存储融合的技术将高速、高 容量的非存储设备作为磁盘设备的下一级设备，将磁盘中常用的数据按指定策略自动迁 移到磁带库等二级容量存储设备上当需要使用这些数据时，分级存储系统会自动将这些数据从下一级存储设备调回到上 一级磁盘上数据冗余(Data Redundancy/Redundant Data)数据冗余是指同一个数据在系统中多次重复出现消除数据冗余的目的是为了避免更 新时可能出现的问题，以便保持数据的一致性数据抽取(Data mining)数据抽取是指从源数据源系统抽取目的数据源系统需要的数据的过程网络数据抽取(Web data mining)网络数据抽取(Web data mining),是指从网络中取得大量的又利用价值的数字化信息 主要包括结构化数据抽取(Structured Data Extraction)信息集成(Information integreation)和观 点才穷掘(Opinion mining)等。
结构化数据抽取的目标是从Web页面中抽取结构化数据这些结构化数据往往存储 在后台数据库中，由网页按一定格式承载着展示给用户例如论坛列表页面、Blog页面、 搜索引擎结果页面等信息集成是针对结构化数据而言，其目标是将从不同网站中抽取出的 数据统一化后集成入库其关键问题是如何从不同网站的数据表中识别出意义相同的数据并 统一存储数据标准化(data standardization)数据标准化是指研究、制定和推广应用统一的数据分类分级、记录格式及转换、编码 等技术标准的过程数据备份(Data Backup)数据备份是容灾的基础，为防着系统出现操作失误或系统故障导致数据丢失，而将全 部或部分数据集合从原来存储的地方复制到其他地方的活动，将数据遭受破坏的程度减到最 小传统的数据备份主要采用内置或外置的磁带机进行冷备份这种方式只能防止操作失误 等认为故障，其恢复时间也很长现代企业采用网络备份，通过专业的数据存储管理软件结 合相应硬件和存储设备来实现备份1 .完全备份(Full Backup)o优点是当发生数据丢失的灾难时，可以迅速恢复丢失的数 据不足之处是每天都对整个系统进行完全备份，造成备份的数据大量重复。
2. 增量备份(Incremental Backup)o先实施一次完全备份，后续时间里只要对当天的或 修改过的数据进行备份优点：节省了磁盘空间，缩短了备份时间;缺点是数据恢复比较麻 烦，备份的可靠性很差3. 差分备份(Differential Backup)o先实施一次完全备份，再将当天所有与备份不同的 数据(新的或修改过的)备份到磁盘上该策略避免了以上两种策略缺陷的同时，具备其所有 优点首先，它无须每天都对系统做完全备份，所需的备份时间短，节省磁盘空间其次, 数据恢复方便.一旦发生问题，用户只需使用完全备份和发生问题前一天的备份就可以将系 统恢复。