Coin163

  • Hadoop+Hbase集群数据迁移问题

    数据迁移或备份是任何一个公司都有可能到遇到的一件事,有关hbase数据迁移,官网也给出了几种方案,这里比较推荐使用hadoop distcp这种方式迁移。比较适合大数据量或者跨版本集群之间的数据迁移服务。 版本 Hadoop

  • 如何监控你的Hadoop+Hbase集群?

    前言 监控hadoop的框架有不少,如CDH的CM组件和Ambari都可以监控他们自己的hadoop,但是它不能监控apache的hadoop,如果你是使用原生的Apache Hadoop,那么也没关系,原生的Hadoop天生就提供了非常详细的对接

  • Hadoop的8088页面失效问题

    前两天重启了测试的hadoop集群,今天访问集群的8088任务监控页面,发现不能用了,总是报500错误,空指针异常,但是以前却是好好的 2016-03-31 10:59:55,418 ERROR org.mortbay.log: /cluster

    日期:2016年03月31日
  • 最近hadoop遇到的issuses

    https://issues.apache.org/jira/browse/YARN-182 https://issues.apache.org/jira/browse/YARN-903 https://issues.apache.org/jira/browse/HBASE-10304 https://issues.apache.org/jira/browse/SPARK-5350 待续未完成~

    日期:2015年08月07日
  • 【征文】Hadoop十周年特别策划——我与Hadoop不得不说的故事

    2016年是Hadoop的十周年生日,在今年,CSDN&ITeye将以技术和实战为主题与大家共同为Hadoop庆生,其主要内容包括Hadoop专业词典、系列视频技术解析、Hadoop行业实践、线上问答、线下沙龙、大范围征文等多个环节。而本期“我与Hadoop

    日期:2016年02月26日
  • Hadoop测试开发环境搭建

    搭建分布式的hadoop环境是比较复杂的,这样使我们学习和熟悉hadoop产生了困难。在这里为大家介绍一个简单的快速搭建hadoop单机开发环境方法。 安装VirtualBox 前置条件 在BOIS中开启CPU虚拟化支持 关闭360安全卫士晶核防护

    日期:2016年03月21日
  • 写给自己的2015

      2016-01-07 朱洁 hadoop技术学习 去年2015-1-2写了一篇文章《写给自己的2014》总结自己的一年。光阴似箭,日月如梭,一年又结束了,今天继续想简单纪念下自己的2015年,期待自己的2016。   2015年初定下的目标

    日期:2016年01月17日
  • windows 远程连接Hadoop debug MapReduce

    纠结了一会才弄出来这个问题,最开始是编写了mapreduce,想测试呢,就打包成jar 扔到虚拟机上,又不能断点来搞,所以在本地搞了一下远程执行mr。 环境: windows7  Hadoop2.6  idea 在idea中创建maven项目,然后配置

  • spark implementation hadoop setup,cleanup

    127.0.0.1 wangwu 5 2015-07-31 23:11:01 127.0.0.1读取到spark中,并统计每行长度,再将数据写到本地的文件中(文件名称以每行第一个单词) 最终实现hadoop中setup, cleanup强烈阅读如下链接: http

    日期:2015年08月11日
  • Hadoop之HBase学习笔记

    > <name>hbase.coprocessor.master.classes</name> <value> org.apache.hadoop