ThetopicconsistentbackupsinHBasecomesupeverynowandthen.InthisarticleIwilloutlineaschemethatdoesprovidetimestamp-consistentbackups.ConsistentbackupsarepossibleinHBase.WithconsistentImeanconsistentasof ... [详细]

mapreduce与mysql交互MapReduce与MySQL交互分类：?hadoop之旅2012-08-2916:12?377人阅读?评论(0)?收藏?举报mapreducemysql数据库hadoopstringjdbc?目录(?)[+]?MapReduce技术推出后，曾遭到关系数据库研究者的挑剔和批评，认为MapReduce不 ... [详细]

我的废话：本文提供代码示例，但是不讲述mapreduce对HBase代码层面的细节，主要讲述我片面的理解和体会。最近看见Medialets(Ref)在网站架构中提到对MapReduce使用的经验分享，采用HDFS作为MapReduce分布式计算的基础环境，基于Python的MapReduce框架计算具 ... [详细]

作者JonathanAllen，译者张晓鹏Hunk是Splunk公司一款比较新的产品，用来对Hadoop和其它NoSQL数据存储进行探测和可视化，它的新版本将会支持亚马逊的ElasticMapReduce。结合Hadoop使用HunkHadoop由两个单元组成，首先是被称为HDFS的存储单元，HDFS可 ... [详细]

当今已进入大数据时代，特别是大规模互联网web2.0应用不断发展及云计算所需要的海量存储和海量计算发展，传统的关系型数据库已无 ... [详细]

GridGain最近在2014年的Spark峰会上发布了Hadoop内存片内加速技术，可以为Hadoop应用带来内存片内计算的相关收益。该技术包括两个单元：和HadoopHDFS兼容的内存片内文件系统，以及为内存片内处理而优化的MapReduce实现。这两个单元对基于磁盘的HDFS和传统 ... [详细]

工作需要，要开始搞hadoop了，又是大数据，自己感觉大数据、云，只是ERP、SOAP风潮之后与智能地球一起诞生的概念炒作。不过Apache是个神奇的组织，Java如果没有它也不会现在如火中天。言归正传：首先需要下载Apachehadoop2.4.0的tar.gz包，到本地解压缩到 ... [详细]

mongoDB的mapreduce使用示例：resdb.runCommand({mapreduce:liveEpgUserVisits,map:function(){emit({provice:this.provice},{data:[{mac:this.mac}],visit:this.visitNum,userCount:0});},reduce:function(key,value){varret{data:[]} ... [详细]

1.vertica概念面向数据分析的数据仓库系统解决方案2.vertica关键特性?标准的SQL接口：可以利用已有的BI、ETL、HadoopMapReduce和OLTP环境?高可用：内置的冗余也提升了查询速度?自动化数据库设计：数据库自动安装、优化、管理?高级压缩：十多种压 ... [详细]

1.先在hive-site.xml中设置小文件的标准.lt;propertygt;lt;namegt;hive.merge.smallfiles.avgsizelt;namegt;lt;va ... [详细]

一直以来都想接触Storm实时计算这块的东西，最近在群里看到上海一哥们罗宝写的FlumeKafkaStorm的实时日志流系统的搭建文档，自己也跟着整了一遍，之前罗宝的文章中有一些要注意点没提到的，以后一些写错的点，在这边我会做修正；内容应该说绝大部分引用罗宝 ... [详细]

直接上代码：Mapperpackagecom.winksi.dotstat;importjava.io.IOException;importorg.apache.hadoop.io.Text;importorg.apache.hadoop.io.LongWritable;importorg.apache.hadoop.mapreduce.Mapper;publicclassDotProducedMapperextendsMapperLongW ... [详细]