Linux-HBASE纯单节点版安装-适合新手入门

分类：HBase作者：Java菜鸟小白~

HBASE官网：Apache HBase – Apache HBase™ Home

HBASE官方指南：Apache HBase ™ Reference Guide

HBASE和JDK版本对应关系

HBASE和Hadoop版本对应关系

本文使用版本为：

hbase-2.3.2-bin.tar.gz   下载地址：Index of /dist/hbase

hadoop-3.3.2.tar.gz  下载地址：Index of /dist/hadoop/common

hadoop-3.3.2.tar.gz   国内地址：Index of /apache/hadoop/common/hadoop-3.3.2

一、部署环境安装说明

部署环境 CentOS7+jdk8

jdk可参考下面安装：

linux-安装oracleJDK替换默认openJDK_Java菜鸟小白~的博客-CSDN博客

HBASE首先需要安装Hadoop

其次安装HBASE

首先参考管网Hadoop和HBASE对应关系

二、配置Hadoop安装环境

1、设置SSH免密登录

备注：Linux系统：CentOS7
原因分析：这是由于CentOS的软件安装工具不是apt-get，而是yum，使用yum命令代替apt-get即可。提示找不到命令

首先下载SSH，先更新软件包

Ubuntu：sudo apt-get update              

CentOS7：sudo yum update

安装SUDO

Ubuntu：sudo apt-get install sudo        

CentOS7：sudo yum install sudo

安装SSH

Ubuntu：sudo apt-get install openssh-server          

CentOS7：sudo yum install openssh-server
# 或
sudo apt install openssh-server

设置免密

ssh-keygen -t rsa -P ''


生成无密码密钥对，询问保存路径直接输入回车

 

生成密钥对：id_rsa和id_rsa.pub，默认存储在~/.ssh目录下。 接下来：把id_rsa.pub追加到授权的key里面去。

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys


然后修改权限：

chmod 600 ~/.ssh/authorized_keys


接着需要启用RSA认证，启动公钥私钥配对认证方式

vim /etc/ssh/sshd_config


如果提示权限不足在命令前加上sudo 修改ssh配置：

PubkeyAuthentication yes # 启用公钥私钥配对认证方式
AuthorizedKeysFile %h/.ssh/authorized_keys # 公钥文件路径


重启SSH（https://blog.csdn.net/weixin_44347111/article/details/105944073）

service ssh restart


此步骤报错：Failed to restart ssh.service: Unit not found.
使用此命令重启：

systemctl restart sshd

2、配置环境变量

解压：
tar -zxvf hadoop-3.3.2.tar.gz

首先我们配置好Hadoop的环境变量，避免每次执行Hadoop命令的时候，都要输入一长串路径。

编辑环境变量

sudo vim /etc/profile
在文件后面加上两行。 

export HADOOP_HOME=/usr/local/hadoop/hadoop-3.3.2
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin


加完后，点击【Esc】，输入【:wq】保存并退出。
使环境变量生效
source /etc/profile

然后执行
hadoop version
看到以下提示 ，说明环境变量配置正确啦！

3、配置Hadoop相关文件


总共需要配置三个文件，分别是：

hadoop-env.sh
core-site.xml
hdfs-site.xml
这三个文件位于$HADOOP_HOME/etc/profile目录下。$HADOOP_HOME指Hadoop的安装位置，按照此教程的话，该位置为/usr/local/Hadoop。执行

hadoop-env.sh配置
hadoop-env.sh文件主要是配置JDK的位置。

如果忘记了JDK的位置，可以执行
 echo $JAVA_HOME

cd /usr/local/hadoop/hadoop-3.3.2/etc/hadoop
 

（1）vim hadoop-env.sh
在文件首行插入如下代码：

export JAVA_HOME=/usr/java/jdk1.8.0_231
/usr/java/jdk1.8.0_231是jdk存放的路径。如果你把jdk安装在其它位置，记得把/usr/java/jdk1.8.0_231替换为相应的路径。

（2）core-site.xml配置
在相同的目录下，执行
vim core-site.xml

在该文件末尾的configuration标签中，插入如下代码：
<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
        <property>
        <name>hadoop.tmp.dir</name>
        <value>/usr/local/hadoop/temp</value>
        <description>Abase for other temporary directories.</description>
    </property>
</configuration>

在上面的配置中，我们做了两项配置：

1、指定HDFS的URI是hdfs://localhost:9000。
2、设定Hadoop的临时文件存放在Linux文件系统中的/usr/local/hadoop/temp目录下。

（3）hdfs-site.xml配置
在相同目录下，执行

vim hdfs-site.xml

在该文件末尾的configuration标签中，插入如下代码：

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>/usr/local/hadoop/hdfs/namenode</value>
    </property>
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>/usr/local/hadoop/hdfs/datanode</value>
    </property>
</configuration>

小tips：

1、replication指的是副本数量，我们现在是单节点，所以是1.
2、dfs.namenode.name.dir指定namenode节点存放数据的位置。
3、dfs.datanode.data.dir指定datanode节点存放数据的位置。

4、验证


现在，配置工作已经基本完成，接下来进行一些验证工作。主要三步：

格式化HDFS文件
启动hadoop
验证hadoop
1.格式化

在使用Hadoop之前我们需要格式化一些hadoop的基本信息。 使用如下命令：

hadoop namenode -format
出现以下界面代表安装成功


2.启动Hadoop

 
cd /usr/local/hadoop/hadoop-3.3.2/sbin
接下来我们启动Hadoop：

start-dfs.sh


若出现报错：

这是因为root用户现在还不能启动hadoop，我们来设置一下就可以了。执行

cd $HADOOP_HOME/sbin 

在start-dfs.sh，stop-dfs.sh两个文件顶部均添加以下内容：

HDFS_DATANODE_USER=root
HADOOP_SECURE_DN_USER=hdfs
HDFS_NAMENODE_USER=root
HDFS_SECONDARYNAMENODE_USER=root


再次执行start-dfs.sh 输入命令 jps 验证,出现如下界面代表启动成功：


 之后如果你是图形化界面，可以在你虚拟机的图形化界面中打开
火狐浏览器输入：http://localhost:9870/ 或者在windows机器上输入http://虚拟机ip地址:9870/ 也可以访问 hadoop的管理页面

好了到了这一步Hadoop就安装完成了。

访问192.168.2.128:9870出现界面：

三、安装HBASE


HBase 安装在 master 节点上，

将下载好的安装包到 /datalake 目录下

hbase-2.3.2-bin.tar.gz

批量解压这几个安装包

cd /usr/local/hbase

tar -zxvf  hbase-2.3.2-bin.tar.gz

1、配置环境变量

vi /etc/profile

将 HBase 添加到环境变量

export HBASE_HOME=/usr/local/hbase/hbase-2.3.2
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$HBASE_HOME/bin

应用环境变量

source /etc/profile

修改 HBase 的配置文件

cd /usr/local/hbase/hbase-2.3.2/conf

vim hbase-site.xml

接着在 hbase-site.xml进行如下配置（前三行是默认的，有分布式需求的话，可以把hbase.cluster.distributed改成true）：

 <property>
    <name>hbase.cluster.distributed</name>
    <value>false</value>
  </property>
  <property>
    <name>hbase.tmp.dir</name>
    <value>./tmp</value>
  </property>
  <property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>false</value>
  </property>

<!--指定hbase管理页面的端口号-->
<property>
     <name>hbase.master.info.port</name>
       <value>16010</value>
</property>
<!--指定hdfs的地址-->
<property>
        <name>hbase.rootdir</name>
         <value>hdfs://localhost:9000/hbase</value>
</property>

以下步骤可不执行（我没执行）

下一步软链接过来Hadoop的core-site.xml和hdfs-site.xml文件（可不执行）
cat regionservers
vim regionservers
软链接格式 ln -s 目标文件 当前文件（可不执行）
在当前文件夹（/usr/local/hbase/hbase-2.3.2/conf）执行命令
ln -s /usr/local/hadoop/hadoop-3.3.2/etc/hadoop/hdfs-site.xml  hdfs-site.xml

2、启动hbase


cd /usr/local/hbase/hbase-2.3.2/bin
start-hbase.sh

验证是否成功：

jps如下： 

访问可视化界面
http://192.168.2.128:16010/master-status

原文地址：https://blog.csdn.net/m0_61813695/article/details/131310864

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。

相关推荐

在HBase集群中开启Thrift服务
文章浏览阅读301次。你可以使用Thrift客户端来测试HBase Thrift服务。例如，在Python中，你可以使用。请确保你的HBase伪集群已正确配置并且Thrift服务已经启动。这将在你的伪集群中启动HBase Thrift服务。库或者直接使用Thrift接口。进入HBase的安装目录，找到。请根据需要进行相应的配置。这将停止Thrift服务。_hbase 单机 thrift 配置
hive和hbase数据迁移
文章浏览阅读565次。hive和hbase数据迁移_hive转hbase
HBase2.4.13单机环境搭建
文章浏览阅读707次。基于单机版安装HBase，前置条件为Hadoop安装完成，安装Hadoop可以参考链接，Hadoop单机安装。地址：https://dlcdn.apache.org/hbase/2.4.13/hbase-2.4.13-src.tar.gz2.解压缩文件3.进入到conf目录下4.修改配置文件 hbase-env.sh示例：示例：6.修改配置文件 hbase-site.xml示例：8.访问页面访问你所以在服务器的16010端口，查看页面以上就是单机版安装HBase的内容，后续_hbase 2.4.13下载
5-linux集群搭建-HBase
文章浏览阅读301次。linux集群搭建-HBase_linux中在/home目录下创建目录hbase
Hbase--02
文章浏览阅读933次。中没有库的概念，说一个数据说的是哪一个名称空间下的那一张表下的哪一个行键的哪一个列族下面的哪一个列对应的是这个数据。注意：put数据需要指定往哪个命名空间的哪个表的哪个rowKey的哪个列族的哪个列中put数据，put的值是什么。注意：put数据需要指定往哪个命名空间的哪个表的哪个rowKey的哪个列族的哪个列中put数据，put的值是什么。注意：put数据需要指定往哪个命名空间的哪个表的哪个rowKey的哪个列族的哪个列中put数据，put的值是什么。操作Hbase系统DDL，对名称空间等进行操作。_hbase中报错undefined method for main:object
HBase监控方法以及核心指标
文章浏览阅读1k次，点赞16次，收藏21次。整理和梳理日常hbase的监控核心指标，作为经验沉淀_hbase 对应promethus指标名
大数据小白初探Hbase从零到入门
文章浏览阅读1.5k次，点赞45次，收藏20次。今天把之前学习Hbase的入门基础知识笔记翻出来了，为了不忘记也是帮助身边的小伙伴，我把他又整理了下放了出来给大家，希望对HBASE一知半解的小伙伴，能够对Hbase有一个清晰的认识，好了废话不多说，进入正题。以上内容就是初的识HBase 入门知识，包含了hbase的由来，特性，物理存储，逻辑存储模型，以及优缺点，应用场景这些内容，相信后面在使用或更深入的研究Hbase打下了良好的基础，后面的更深入的学习内容，看计划安排在后面的文章中进行更新。
在大数据相关技术中，HBase是个分布的、面向列的开源数据库，是一个适合于非结构化数据存储的数据库。
文章浏览阅读655次。HDFS，适合运行在通用硬件上的分布式文件系统，是一个高度容错性的系统，适合部署在廉价的机器上。Hbase，是一个分布式的、面向列的开源数据库，适合于非结构化数据存储。MapReduce，一种编程模型，方便编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。Chukwa，是一个开源的用于监控大型分布式系统的数据收集系统。_开源非结构化数据存储
mongodb和hbase的区别和应用场景
文章浏览阅读1.9k次。mongodb和hbase的区别和应用场景_hbase和mongodb的区别
Hbase入门篇01---基本概念和部署教程
文章浏览阅读1.2k次。Hbase入门篇01---基本概念和部署教程_hbase教程
HBase相关面试准备问题
文章浏览阅读1.6k次，点赞19次，收藏25次。hbase相关内容
hbase2.x hbck2处理region方案（长期opening\closing\offline,Report Region Holes,report Unkown server）等
文章浏览阅读942次，点赞16次，收藏20次。在hbase1.x中transition是令广大大数据运维人员头疼的一个话题，因为，region 的状态转移涉及到了三个核心组件，分别为：hbase master，zookeeper和hbase 的regionserver，这三个组件中的某一个region的状态都是一致的情况下，这个region 才算是正常，状态转移过程及其复杂，hbase 集群很容易出现RIT。好消息是，hbase2.x中有个工具HBCK2，这个工具可不是简单的hbase1.x中hbck 的升级，变化有点大，详细变化请参考帮助文档（
hbase相关操作
文章浏览阅读1k次。在HBase中，Region分裂是一种自动的机制，用于在Region大小达到一定阈值时将其分裂成两个Region，以便更好地管理数据。HBase中的Region大小是可以配置的，通过设置HBase表的最小和最大Region大小来控制。需要注意的是，禁止Region分裂后，当表的大小达到一定阈值时，数据将不再分裂成新的Region，因此需要根据实际需求进行调整。需要注意的是，禁止Region分裂后，当表的大小达到一定阈值时，数据将不再分裂成新的Region，因此需要根据实际需求进行调整。_hbase region大小
HBase在数据仓库中的应用
文章浏览阅读737次。可以看出，HBase作为数据仓库的一种补充，可以用于存储和管理大量数据，以便快速地分析和查询。是一种基于数据库的形式，用于存储和管理大量数据，以便快速地分析和查询。例如，可以使用HBase存储一些用户行为数据，然后进行分析，以便更好地了解用户行为和需求。其次，需要配置HBase相关的环境变量，例如JAVA_HOME、HBASE_HOME等。HBase可以用于存储结构化和非结构化数据，包括文本、图像、视频等。例如，可以使用HBase存储一些传感器数据，然后进行实时分析和处理。一、HBase集群环境搭建。_用hbase 搭建数仓
Springboot整合HBase
文章浏览阅读1.9k次。Data。_springboot整合hbase
记录一次线上Hbase2.1.0版本RegionServer节点无故挂掉，且无日志输出
文章浏览阅读880次，点赞23次，收藏20次。etc/abrt下的两个文件，分别是：abrt-action-save-package-data.conf 和 abrt.conf，修改内容如下。我们后面排查的时候去查看/run/cloudera-scm-agent/process/2325-hbase-REGIONSERVER下是否有。发现有个hs_err_pid15967.log JVM生成的错误日志，那么把这个日志下载查看，返现日志这么写的。接下来就等下一次hbase的节点挂了之后查看转储文件，转储文件在/var/sqool/abrt下。_regionserver 退出 没有错误日志
Hbase Shell基本操作
文章浏览阅读1.7k次。以下命令都需要在Hbase Shell中运行：Hbase信息status：服务器状态version：版本表操作查看所有表：list表基本信息：describe "表名称"查看表是否存在：exists '表名称'创建表：create '表名称', '列族1', '列族2', '列族3'删除表：首先禁用表：disable '表名称'然后删除表：drop '表名称'修改表：表数据操作查看所有数据：scan "表名称"..._hbase sehll怎么看登录的是哪个hbase
在HBase中执行查询操作通常使用HBase Shell或编程语言API（如Java或Python）来执行
文章浏览阅读885次，点赞18次，收藏21次。在HBase中执行查询操作通常使用HBase Shell或编程语言API（如Java或Python）来执行。使用编程语言API，您可以使用相应的HBase客户端库来执行查询操作。这是一个简单的Java代码示例，演示了如何使用HBase Java API进行单行查询。这些示例仅为基本查询操作，HBase Shell还提供其他高级查询功能，如按时间戳过滤，使用正则表达式进行查询等。请注意，这只是HBase查询的基本示例，您可以根据实际需求和HBase的数据模型进行更复杂的查询操作。
ERROR: KeeperErrorCode = NoNode for /hbase/master
文章浏览阅读7.3k次，点赞7次，收藏28次。找到hbase的bin目录并进入，执行启动hbase hmaster命令。问题原因 hmaster挂了 ，需要重新启动hmaster才行。hbase shell输入命令出现如下问题。_keepererrorcode = nonode for /hbase/master
大数据技术原理与应用笔记
文章浏览阅读1.3k次。三次信息化浪潮。_大数据应用开发技术笔记
pythonJavaScriptjavaHTMLPHPreactjsC#AndroidCSSNode.jssqlrpython-3.xMysqLjQueryc++pandasFlutterangularIOSdjangolinuxswifttypescript路由器JSON路由器设置无线路由器h3c华三华三路由器设置华三路由器电脑软件教程arraysdocker软件图文教程Cvue.jslaravelspring-boot