《Sqoop用户指南》由会员分享，可在线阅读，更多相关《Sqoop用户指南（197页珍藏版）》请在金锄头文库上搜索。
1、Sqoop用户指南(v1.4.6)1。介绍2。支持的版本3所示。Sqoop版本4所示。先决条件5。基本用法6。Sqoop工具6.1。使用命令别名6.2。控制Hadoop安装6.3。使用通用的和具体的参数6.4。使用选项文件传递参数6.5。使用工具7所示。sqoop-import7.1。目的7.2。语法7.2.1。连接到一个数据库服务器7.2.2。选择导入的数据7.2.3。自由格式的查询进口7.2.4。并行性控制7.2.5。控制分布式缓存7.2.6。控制导入过程7.2.7。控制事务隔离7.2.8。控制类型映射7.2.9。增加进口7.2.10。文件格式7.2.11。大对象7.2.12。将数据导入到
2、Hive7.2.13。将数据导入到HBase7.2.14。将数据导入到Accumulo7.2.15。额外的进口配置属性7.3。示例调用8sqoop-import-all-tables8.1。目的8.2。语法8.3。示例调用9sqoop-import-mainframe9.1。目的9.2。语法9.2.1。连接到主机9.2.2。选择导入的文件9.2.3。并行性控制9.2.4。控制分布式缓存9.2.5。控制导入过程9.2.6。文件格式9.2.7。将数据导入到Hive9.2.8。将数据导入到HBase9.2.9。将数据导入到Accumulo9.2.10。额外的进口配置属性9.3。示例调用10sqoop
3、-export10.1。目的10.2。语法10.3。插入和更新10.4。出口和交易10.5。没有出口10.6。示例调用11validation11.1。目的11.2。介绍11.3。语法11.4。配置11.5。限制11.6。示例调用12保存工作13sqoop-job13.1。目的13.2。语法13.3。保存工作和密码13.4。保存工作和增加进口14sqoop-metastore14.1。目的14.2。语法15。sqoop-merge15.1。目的15.2。语法16。sqoop-codegen16.1。目的16.2。语法16.3。示例调用17所示。sqoop-create-hive-table17
4、.1。目的17.2。语法17.3。示例调用18岁。sqoop-eval18.1。目的18.2。语法18.3。示例调用19所示。sqoop-list-databases19.1。目的19.2。语法19.3。示例调用20。sqoop-list-tables20.1。目的20.2。语法20.3。示例调用21。sqoop-help21.1。目的21.2。语法21.3。示例调用22。sqoop-version22.1。目的22.2。语法22.3。示例调用23。Sqoop-HCatalog集成23.1。HCatalog背景23.2。暴露HCatalog Sqoop表23.2.1。新的命令行选项23.2.2
5、。支持SqoopHive选项23.2.3。直接模式支持23.2.4。不支持Sqoop选项23.2.4.1。不支持SqoopHive导入选项23.2.4.2。不支持Sqoop导出和导入选项23.2.5。忽略Sqoop选项23.3。自动表创建23.4。分隔的文本格式和字段和行分隔符字符23.5。HCatalog表要求23.6。支持分区23.7。模式映射23.8。支持HCatalog数据类型23.9。提供Hive和HCatalog库Sqoop工作23.10。例子23.11。进口23.12。出口24。兼容性的笔记24.1。支持数据库24.2。MySQL24.2.1。zeroDateTimeBehavi
6、or24.2.2。UNSIGNED列24.2.3。BLOB和CLOB列24.2.4。导入视图直接模式24.3。PostgreSQL24.3.1。导入视图直接模式24.4。甲骨文24.4.1。日期和时间24.5。模式定义在Hive24.6。CUBRID25。指出特定的连接器25.1。MySQL JDBC连接器25.1.1。插入功能25.2。MySQL连接器直接25.2.1。需求25.2.2。限制25.2.3。直接方式交易25.3。Microsoft SQL连接器25.3.1。额外的参数25.3.2。允许插入身份25.3.3。Non-resilient操作25.3.4。模式支持25.3.5。表提示
7、25.4。PostgreSQL连接器25.4.1。额外的参数25.4.2。模式支持25.5。PostgreSQL直接连接器25.5.1。需求25.5.2。限制25.6。pg_bulkload连接器25.6.1。目的25.6.2。需求25.6.3。语法25.6.4。数据暂存25.7。Netezza连接器25.7.1。额外的参数25.7.2。直接模式25.7.3。空字符串处理25.8。甲骨文和Hadoop数据连接器25.8.1。关于25.8.1.1。工作25.8.1.2。进口标准Oracle管理器是如何工作的25.8.1.3。Oracle的数据连接器和Hadoop如何适用于进口吗25.8.1.4。
8、甲骨文和Hadoop数据连接器出口25.8.2。需求25.8.2.1。确保Oracle数据库的JDBC驱动程序是否正确安装25.8.2.2。甲骨文角色和权限25.8.2.3。额外的Oracle出口所需的角色和权限25.8.2.4。支持的数据类型25.8.3。执行Sqoop对甲骨文和Hadoop数据连接器25.8.3.1。连接到Oracle / Oracle RAC25.8.3.2。连接Oracle数据库实例25.8.3.3。连接到一个Oracle RAC25.8.3.4。登录到Oracle实例25.8.3.5。杀死数据连接器甲骨文和Hadoop的工作25.8.4。从Oracle中导入数据25.
9、8.4.1。匹配Hadoop文件Oracle表分区25.8.4.2。指定分区导入25.8.4.3。一致的阅读:所有映射器读取相同的时间点25.8.5。导出数据到甲骨文25.8.5.1。Insert-Export25.8.5.2。Update-Export25.8.5.3。Merge-Export25.8.5.4。创建Oracle表25.8.5.5。nolog25.8.5.6。分区25.8.5.7。通过多个列匹配的行25.8.5.8。存储的条款25.8.6。处理日期和时间戳数据类型25.8.6.1。进口日期和时间戳从Oracle数据类型25.8.6.2。Oracle的数据连接器和Hadoop不适
10、用一个时区的日期/时间戳数据类型25.8.6.3。甲骨文和Hadoop保留的数据连接器时区的时区信息数据类型25.8.6.4。Oracle的数据连接器和Hadoop明确国家时区为本地时区数据类型25.8.6.5。java.sql.Timestamp25.8.6.6。出口日期和时间戳到Oracle数据类型25.8.7。配置Oracle的数据连接器和Hadoop25.8.7.1。oraoop-site-template.xml25.8.7.2。oraoop.oracle.session.initialization.statements25.8.7.3。oraoop.table.import.wh
11、ere.clause.location25.8.7.4。oracle.row.fetch.size25.8.7.5。oraoop.import.hint25.8.7.6。oraoop.oracle.append.values.hint.usage25.8.7.7。mapred.map.tasks.speculative.execution25.8.7.8。oraoop.block.allocation25.8.7.9。oraoop.import.omit.lobs.and.long25.8.7.10。oraoop.locations25.8.7.11。sqoop.connection.fact
12、ories25.8.7.12。表达式在oraoop-site.xml25.8.8。故障诊断的数据连接器甲骨文和Hadoop25.8.8.1。引用甲骨文所有者和表25.8.8.2。引用甲骨文列25.8.8.3。确认的数据连接器甲骨文和甲骨文Hadoop可以初始化会话25.8.8.4。检查Sqoop调试日志的错误消息25.8.8.5。出口:检查表是兼容的25.8.8.6。出口:并行化25.8.8.7。出口:检查oraoop.oracle.append.values.hint.usage25.8.8.8。打开详细26岁。获得支持27。故障排除27.1。一般故障诊断流程27.2。具体的故障排除技巧27
13、.2.1。Oracle:连接重置错误27.2.2。Oracle:区分大小写的目录查询错误27.2.3。MySQL:连接失败27.2.4。Oracle:ora - 00933错误(SQL命令不正确地结束)27.2.5。MySQL:进口非常小的整数(1)从MySQL的行为很奇怪 Licensed to the Apache Software Foundation (ASF) under one or more contributor license agreements. See the NOTICE file distributed with this work for additional i
14、nformation regarding copyright ownership. The ASF licenses this file to you under the Apache License, Version 2.0 (the License); you may not use this file except in compliance with the License. You may obtain a copy of the License at http:/www.apache.org/licenses/LICENSE-2.0 Unless required by applicable law or agreed to in writing, software distributed under the License is distributed on an AS IS BASIS, WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. See the License for the specific language governing permissions and limitations
