cloudera
重启远程关机服务器 Linux
我通过 Cloudera Manager 远程管理 Hadoop 集群。我不小心关闭了其中一台服务器，需要重新启动它。我试过 ssh，但无法连接到主机。有没有其他方法可以让我无需亲自到场就可以重新启动服务器？ ...
cloudera
cloudera
CDH 社区版从 5.7 升级到 5.13，无需 Cloudera Express 或 Cloudera Enterprise
我有一个像下面这样的集群- 3 个 Hbase Master（1 个活动和 2 个备用） 4 个区域服务器 4 个数据节点 1 个主名称节点和 1 个辅助名称节点 3 日志节点 4 节点管理器 3 个资源管理器 (1 个活动 & 2 个备用) 查询 1 如果我通过上述“一键”包手动升级包，停止、升级和启动组件的顺序应该是什么这里是像下面这样吗:- 逐一停止、升级并启动所有数据节点。 逐个停止，升级和启动区域服务器 停止，升级和启动 逐个升级 HBase 备用节点 停止，升级和启动辅助名称节点 升级主名称节点 升级日志节点 升级 HBas...
cloudera
运行 CDH5 Docker 镜像时找不到“/usr/bin/docker-quickstart”
我已经下载了CDH 5.12 快速入门 Docker 映像来自 Cloudera，但运行失败。 $ docker import cloudera-quickstart-vm-5.12.0-0-beta-docker.tar.gz sha256:8fe04d8a55477d648e9e28d1517a21e22584fd912d06de84a912a6e2533a256c $ docker run --hostname=quickstart.cloudera --privileged=true -t -i 8fe04d8a5547 /usr/bin/dock...
cloudera
在 AWS 基础设施上扩展 Hadoop 磁盘
我们的 Hadoop 集群磁盘快满了。所以我想尽快扩展磁盘，我能想到的一种方法是增加所有三个节点 Hadoop 2.6.0-cdh5.5.1（2 个数据节点，1 个名称节点）上的 ebs 卷。 所以我的疑问是， 有没有更好的方法来扩展磁盘？ 如果是的话，那是什么方法？ 信息：我们在/DATA 安装点上安装了一个 EBS 卷 ...
cloudera
Cloudera SCM 代理无法心跳但端口可联系
我正在尝试向 Cloudera 集群添加节点。当代理启动时，我收到一个 python 堆栈跟踪，提示无法向 master-host:7182 发送心跳，但我可以正常连接到该端口。 堆栈跟踪来自 Python，最后显示连接超时。 nc -z 1 -w master-host 7182返回“连接成功” 防火墙已关闭，SELinux 处于宽容状态。 每个盒子有 2 个 IP，一个在 4 空间，一个在 8 空间。DNS 解析 8 地址，hosts 文件解析 4 地址。 编辑：添加更多信息，基于这个帖子： 操作系统版本相同，代理/管理器版本相同 我可以从...
cloudera
cloudera hue 与 ldap 服务器集成时出现错误？
我已经在 centos 机器上配置了 ldap 服务器。我可以成功执行 ldapadd 和 ldapsearch。但是在将 ldap 与 cloudera hue 集成时出现以下错误 RuntimeError：无法以用户 cn=Manager 的身份绑定到 LDAP 服务器 [02/Mar/2015 09:11:22 -0800] 中间件 INFO 处理异常：无法以用户 cn=Manager 的身份绑定到 LDAP 服务器：回溯（最近一次调用最后一次）：文件“/opt/cloudera/parcels/CDH-5.2.1-1.cdh5.2.1.p0....
cloudera
在 Cloudera HBase 集群中移动 SecondaryName 节点
我在与主名称节点相同的机器上部署了辅助名称节点： 这是错误的出于性能和耐用性原因（辅助名称节点不是热备用节点，但它确实有所需元数据的副本）。我发现关于如何移动名称节点的文档，但没有关于移动辅助名称节点的任何信息。 有经验的人知道如何安全地做到这一点吗？ ...
cloudera
HBASE 空间使用量开始快速攀升
更新 4215： 查看空间使用情况后里面在 hdfs 中，我发现 .oldlogs 占用了大量空间： 1485820612766 /hbase/.oldlogs 新问题： 它是什么？ 我该如何清理它？ 我该如何防止它再次生长 是什么促使它开始生长？ 此外 .archive 也很大，那是什么，我的快照？ 另外，作为家庭作业，scollector 将不会监控各种 hdfs 目录的磁盘空间使用情况.... 另外，看起来以下错误在那个时候开始反复填充日志，不确定它们到底意味着什么： 2014-11-25 01:44:47,673 FATAL or...
cloudera
安装 oozie 的 sharedlibcloudera
我在尝试使用 cloudera 安装新的 CDH5 集群时遇到问题。使用 parcels 一切正常，但安装了 oozie 的 sharedlib 时除外。由于超时结束，上传失败。 然后我尝试使用软件包，但情况更糟。集群安装无法下载软件包：“操作太慢...尝试另一个镜像...没有其他镜像可尝试...放弃” 正在下载软件包： http://archive.cloudera.com/cdh5/redhat/6/x86_64/cdh/5/RPMS/noarch/bigtop-utils-0.7.0%2Bcdh5.2.0%2B0-1.cdh5.2.0....
cloudera
在 Cloudera Manager 中禁用“复制块不足”警报
我有一个单服务器 HBase 集群，仅将其用作 HBase 复制的接收端。因此，我不想复制此集群中的任何块（因为源已复制块，所以我觉得不需要它）。 我想禁用此实例的“复制块不足”警报。我尝试了两种方法： 将此实例的复制因子设置为 1 将阈值设置为不可能的数量（即复制块下的 200%）。这确实会停止警报，但会将其替换为无效配置警报。 有人知道如何关闭集群的这个特定警报吗？ ...
cloudera
HBase 与 *一些* 区域服务器连接存在问题
我有一个正在运行的 HBase 集群，我正在尝试向该集群添加一些新服务器，但是“SocketException：参数无效”和“FailedServerException：该服务器位于失败的服务器列表中”日志中不断产生错误。 2014-07-02 22:28:01,140 WARN org.apache.hadoop.hbase.regionserver.HRegionServer: Unable to connect to master. Retrying. Error was: java.net.SocketException: Invalid argu...
cloudera
Cloudera Manager CDH5 - Oozie 数据库安装失败
在安装过程中，我在“创建 Oozie 数据库”步骤上不断遇到失败 java.lang.Exception: DB schema exists at org.apache.oozie.tools.OozieDBCLI.validateDBSchema(OozieDBCLI.java:877) at org.apache.oozie.tools.OozieDBCLI.createDB(OozieDBCLI.java:184) at org.apache.oozie.tools.OozieDBCLI.run(OozieDBCLI.java...
cloudera
无法将 HDFS 从非 HA 转换为 HA
介绍 目的：将 HDFS 从非 HA 转换为 HA。 方法：根据本文档通过实施以下配置，可以将 HFDS 从非 HA 转换为 HA： /etc/hadoop/conf/hdfs-site.xml <property> <name>dfs.ha.automatic-failover.enabled</name> <value>true</value> </property> /etc/hadoop/conf/core-site.xml <propert...
cloudera
HDFS 的 ZKFC 服务无法启动
CDH4's ZooKeeper Failover Controller (ZKFC)已安装。 启动ZKFC服务： [vagrant@localhost ~]$ sudo service hadoop-hdfs-zkfc start Starting Hadoop zkfc: [ OK ] starting zkfc, logging to /var/log/hadoop-hdfs/hadoop-hdfs-zkfc-localhost...
cloudera
无法在请求的 2181 端口启动 ZK，同时导出 HBASE_MANAGES_ZK=false
问题 第一个目标是独立运行 HBase。一旦启动 HBase，导航到 ip:60010/master-status 即可成功。 第二个目标是运行不同的 ZooKeeper 仲裁。ZooKeeper 已下载并启动： netstat -nato | grep 2181 tcp 0 0 :::2181 :::* LISTEN off (0.00/0/0) 修改conf/hbase-env.sh如下： # Tell HBase whet...