运行环境CentOS5.6hadoophivesqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出 ... [详细]

Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具，可以将一个关系型数据库（例如：MySQL,Oracle,Postgres等） ... [详细]

RCFile是Hive推出的一种专门面向列的数据格式。它遵循ldquo;先按列划分，再垂直划分rdquo;的设计理念。当查询过程中，针对它并 ... [详细]

项目进行了大半后发现悲剧了，利用sqoop默认的从oracle数据库到处的数据表，如果其中的数据精度大于15位，而导入的表有些字段默认 ... [详细]

将Oracle中的业务基础表增量数据导入Hive中，与当前的全量表合并为最新的全量表。通过Sqoop将Oracle中表的导入Hive，模拟全量表和 ... [详细]

上一篇文章《Sqoop1.4.4实现将Oracle10g中的增量数据导入Hive0.13.1，并更新Hive中的主表》描述了增量更新Hive表的原理和Sq ... [详细]

Sqoop的安装也很简单。完成sqoop的安装后，可以这样测试是否可以连接到mysql(注意：mysql的jar包要放到SQOOP_HOMElib下)： ... [详细]

list-tablessqooplist-tables--connectjdbc:mysql:192.168.40.194sqoop--usernameroot--passwordroot建表及数据导入sqoopimport--connectjdbc:oracle:thin:@69.16.22.106:1521:tjsatbi--tableFWSK.DM_HY--usernameSJCX--passwordsjcx ... [详细]

周海汉文2013.8.22环境hive版本hive-0.11.0sqoop版本?sqoop-1.4.4.bin__hadoop-1.0.0从hive导到mysqlmysql表：mysqldesccps_activation;++-++++-+|Field|Type|Null|Key|Default|Extra|++-++++-+|id|int(11)|NO|PRI|NU ... [详细]

首先我们要安装好sqoop笔者我用的是sqoop1其次我们需要ojdbc6.jar这个jar包下载地址如下：www.oracle.comtechnetworkdatabaseenterprise-editionjdbc-112010-090769.html将解压的包复制到sqoop安装目录下的lib目录中最后执行我们的导入 ... [详细]

文章系本人原创，转载请保持完整性并注明出自《四火的唠叨》HeresmynotesaboutintroductionandsomehintsforHadoop-basedopensourceprojects.Hopeitsusefultoyou.ManagementToolAmbari:Aweb-basedtoolforprovisioning,managing ... [详细]

Sqoop是一种用于hadoop与RDBMS进行数据传输的工具。配置比较简单。去apache官网下载最新的sqoop包。下载地址：www.apache.orgdistsqoop1.99.1解压缩到服务器上。服务器要求本身有jdk，hadoop，hive。配置：confsqoop-env.sh# ... [详细]