- 浏览: 4624 次
最新评论
文章列表
1、首先安装hive,远程mysql
tar zxf apache-hive-0.13.1-bin.tar.gz -C /home/hadoop
默认没有mapred-site.xml文件,vi hive-site.xml
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://192.168.1.108:3306/hive?c ...
HBase是Google Bigtable的开源实现,它利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase中的海量数据,利用Zookeeper作为协同服务。
HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable:一个结构化数据的分布式存储系统》。HBase是Google Bigtable的开源实现,它利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase中的海量数据,利用Zookeeper作为协同服务。
hadoop 2.2.0 与hbase 0.96 集成时 ...
开始不理解 hadoop fs -put input1.txt in
所以在/data 下新建了 in 文件夹,结果运行测试程序都不对。
hadoop 是个文件系统,它有自己的管理方式和存储方式.你在本地文件系统是找不到这个相同的目录的如果你能看见,那就变成 linux文件系统了,还能叫hadoop文件系统吗
[hadoop@localhost data]$ touct input1.txt
[hadoop@localhost data]$ vi input1.txt
input1.txt文件内容
hello world
hello ray
hello Hadoop
[h ...
今天在centOS 6.5成功编译hadoop 2.2.0 ,以前编译未通过,环境也是centOS 6.5 但是安装了adoop 2.3.0,因为HADOOP ECLIPSE PLUGIN 2.2 无法访问虚拟机HDFS文件系统 ,所以新装了一个CentOS虚拟机,重新编译hadoop2.2。
总结以前编译不成功的原因:
2. 安装下面的软件
$ yum install cmake lzo-devel zlib-devel gcc autoconf automake libtool ncurses-devel openssl-deve
上面这条命令有时不能把列出来 ...
Hadoop的发行版除了社区的Apache Hadoop外,Cloudera ,Hortonworks,MapR,EMC,IBM,Intel,华为等都提供了自己的商业版本。商业版主要是提供了专业的技术支持,这对一些大型企业尤其重要。每个发行版都有自己的一些特点,本文就各个发行版做简单介绍。
2008 年成立的Cloudera 是最早将Hadoop 商用的公司,为合作伙伴提供 Hadoop 的商用解决方案,主要是包括支持,咨询服务,培训。2009年Hadoop的创始人 DougCutting也加盟 Cloudera公司。Cloudera 产品主要为CDH,Cloudera Manager,C ...