微信公众号 讲师中心
首页
文章
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 自媒体 新闻
专题
后端开发 web前端 数据库 开发工具 php框架 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程 新闻
AI工具
AI 聊天问答 Agent智能体 AI 文本写作 AI 绘画作图 AI 设计工具 AI 视频创作 AI 音频制作 AI 办公学习 AI 编程开发 Prompt指令
学习
大前端 后端开发 数据库 移动端 运维开发 计算机基础
编程手册
大前端 后端开发 数据库 移动端 运维开发 计算机基础
下载
js特效 网站源码 工具下载 类库下载 网站素材 学习资源 插件扩展 手机/移动开发 手机游戏
最近更新
搜索
后端开发 web前端 数据库 开发工具 php框架 常见问题 科技 Java 系统教程 电脑教程 硬件教程 手机教程 软件教程 游戏教程
自媒体 新闻
首页 > 数据库 > mysql教程 > 正文

Alex的Hadoop菜鸟教程:第6课Sqoop2安装教程

php中文网
发布： 2016-06-07 16:10:41
原创
2039人浏览过

安装 sqoop 分为服务端和客户端，先安装服务端 $ sudo yum install sqoop2-server 再安装客户端 $ sudo yum install sqoop2-client 服务端 配置 分为 MRv1 和 YARN(Map Reduce 2代)两种情况 YARN alternatives --set sqoop2-tomcat-conf /etc/sqoop2/tomcat-

安装

sqoop 分为服务端和客户端，先安装服务端 
$ sudo yum install sqoop2-server
登录后复制

再安装客户端 
$ sudo yum install sqoop2-client
登录后复制

服务端

配置

分为 MRv1 和 YARN(Map Reduce 2代)两种情况
YARN 
alternatives --set sqoop2-tomcat-conf /etc/sqoop2/tomcat-conf.dist
登录后复制

MRv1 
alternatives --set sqoop2-tomcat-conf /etc/sqoop2/tomcat-conf.mr1
登录后复制

安装JDBC驱动

先下载jdbc驱动 http://dev.mysql.com/downloads/file.php?id=454397 下载完后解压开有一个 mysql-connector-java-5.1.34-bin.jar 拷贝到 /var/lib/sqoop2/ 这个目录下

启动Sqoop2

启动 
$ sudo /sbin/service sqoop2-server start
登录后复制

停止 
$ sudo /sbin/service sqoop2-server stop
登录后复制


检验是否启动成功

$ wget -qO - localhost:12000/sqoop/version
登录后复制

会输出 
{"version":"1.99.2-cdh5.0.0",...}
登录后复制

客户端

启动客户端 
sqoop2
登录后复制

输出 
Sqoop home directory: /usr/lib/sqoop2
Sqoop Shell: Type 'help' or '\h' for help.

sqoop:000>
登录后复制

连接服务端，假设你的服务端是localhost 
sqoop:000> set server --host localhost
登录后复制

测试一下sqoop命令 
sqoop:000> show version --all
client version:
  Sqoop 1.99.3-cdh5.0.1 revision Unknown 
  Compiled by jenkins on Tue May  6 14:02:38 PDT 2014
server version:
  Sqoop 1.99.3-cdh5.0.1 revision Unknown 
  Compiled by jenkins on Tue May  6 14:02:38 PDT 2014
Protocol version:
  [1]
登录后复制




大家都在看：

最佳 Windows 性能的顶级免费优化软件
最佳 Windows 性能的顶级免费优化软件

每个人都需要一台速度更快、更稳定的 PC。随着时间的推移，垃圾文件、旧注册表数据和不必要的后台进程会占用资源并降低性能。幸运的是，许多工具可以让 Windows 保持平稳运行。

下载
来源：php中文网
收藏 点赞
上一篇：（一个代码学会c语言操作数据库）linux上通过c语言操作数据库实 下一篇：dblink导致执行计划出错，hint也无效
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
最新问题
mysql中INSERT IGNORE如何使用_mysql INSERT IGNORE操作技巧 INSERTIGNORE用于跳过重复主键或唯一索引冲突，避免插入错误。示例中向users表插入重复id和name时，第二条记录被忽略而不报错。适用于批量导入、初始化配置等场景，但不更新原有数据，且可能忽略外键错误。与REPLACEINTO（删除后插入）和ONDUPLICATEKEYUPDATE（冲突时更新）不同，INSERTIGNORE仅跳过冲突行。可通过批量插入多值、结合LOADDATAINFILE提升效率，并用ROW_COUNT()判断实际插入行数。
2025-11-23 16:18:06
858
mysql归档表如何查询_mysql归档表数据查询的几种常用方法 归档表查询需优化性能，1.使用SELECT配合时间字段索引，避免全表扫描；2.按时间分区时利用分区裁剪提升效率；3.跨表查询用UNIONALL合并当前表与归档表结果。
2025-11-23 16:15:06
789
mysql存储引擎缓存对事务的影响_mysql存储引擎缓存优化 InnoDB缓存机制通过缓冲池和日志缓冲显著提升事务性能：缓冲池减少磁盘I/O，命中率应保持95%以上，建议设置innodb_buffer_pool_size为物理内存70%-80%，并启用预加载；日志缓冲批量写入redolog，建议增大innodb_log_buffer_size至64M~256M，根据数据安全性需求调整innodb_flush_log_at_trx_commit为1、2或0；查询缓存已弃用，推荐使用Redis等应用层缓存；配合开启changebuffering、合理配置io_
2025-11-23 16:14:02
353
mysql客户端怎么配置_mysql客户端安装后配置详细指南 首先确认MySQL客户端已安装，通过mysql--version验证；然后使用-h、-P、-u、-p等参数连接数据库，建议通过~/.my.cnf或C:\my.ini配置文件简化连接；设置default-character-set=utf8mb4避免乱码，并启用auto-rehash和show-warnings优化体验；最后检查服务状态、网络、防火墙及用户权限解决常见连接问题。
2025-11-23 16:06:06
938
mysql如何恢复丢失数据_mysql数据恢复操作方法 MySQL数据丢失后能否恢复取决于备份和日志配置。若有备份文件，可通过逻辑或物理备份还原数据；若开启binlog，可利用mysqlbinlog解析日志并重构SQL恢复误删数据；InnoDB引擎在崩溃后可自动利用redolog和undolog恢复，必要时通过innodb_force_recovery强制启动导出数据；无备份无日志时可尝试Percona等第三方工具从ibd文件中抢救数据。关键在于日常启用binlog、定期备份并测试恢复流程，发现问题立即停止写入以避免覆盖。
2025-11-23 15:44:02
321
mysql归档表怎么备份_mysql归档表备份的详细操作指南 根据业务场景选择合适备份方式，优先考虑数据量与恢复需求。1.使用mysqldump进行逻辑备份，适用于中小规模归档表，通过--single-transaction保证一致性，导出结构与数据并压缩存储；2.采用SELECTINTOOUTFILE高效导出超大归档表数据为CSV格式，结合LOADDATAINFILE恢复；3.对超大规模表使用PerconaXtraBackup物理备份，提升速度并减少停机时间，支持按表空间恢复；4.实施自动化备份与保留策略，通过Shell脚本和cron定时执行，命名规范并
2025-11-23 15:43:02
399
mysql触发器执行顺序怎么控制_mysql触发器执行顺序管理技巧 MySQL不保证同事件多触发器的执行顺序，应合并逻辑到单个触发器或用存储过程统一管理，避免依赖其顺序。
2025-11-23 15:34:02
310
mysql中迁移大数据量数据库的方法 答案：迁移大数据量MySQL数据库推荐使用XtraBackup物理备份与主从复制结合的方式，可实现不停机、高效且一致的数据迁移。首先通过XtraBackup热备避免锁表，快速完成全量备份并恢复到目标端；再利用MySQL主从复制机制同步增量数据，减少最终切换时的停机时间；对于不支持物理备份的场景，可采用mydumper多线程逻辑导出导入；同时建议优化网络传输（如内网、压缩、rsync）和存储性能（SSD），确保迁移效率与稳定性。
2025-11-23 15:27:06
227
mysql错误日志包含哪些信息_mysql错误日志内容解析 错误日志记录MySQL启动关闭信息、运行时错误警告、崩溃恢复详情及插件加载异常。1.启动时记录时间、版本、配置路径、InnoDB初始化及Galera节点状态，正常关闭标记“Shutdowncompleted”。2.运行期核心错误包括表损坏、磁盘满、内存不足、连接超限及InnoDB问题，主从延迟等警告需关注。3.崩溃时输出信号类型、堆栈跟踪，重启后显示InnoDB恢复过程，建议结合coredump分析。4.插件加载失败如库文件无法打开、权限不足、复制线程报错等均被记录。定期审查并合理配置log_e
2025-11-23 15:13:02
844
mysql怎么查看连接数_mysql查看当前数据库连接数的命令 使用SHOWSTATUSLIKE‘Threads_connected’查看当前连接数；2.用SHOWSTATUSLIKE‘Max_used_connections’了解历史最大并发连接；3.执行SHOWVARIABLESLIKE‘max_connections’查看最大连接限制；4.通过SHOWPROCESSLIST或SHOWFULLPROCESSLIST获取当前所有连接的详细信息，便于监控与排查。
2025-11-23 15:12:06
401
相关专题
更多>
热门推荐
开源免费商场系统广告
热门教程
更多>
相关推荐
热门推荐
最新课程
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新 English
php中文网：公益在线php培训，帮助PHP学习者快速成长！
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号

  • PHP学习

  • 技术支持

  • 返回顶部