Questions tagged «hadoop»

我很喜欢阅读ServerFault一段时间，并且在Hadoop上遇到了很多话题。从全局的角度来看，我很难找到它的作用。 所以我的问题很简单：什么是Hadoop？它有什么作用 ？它是干什么用的 ？为什么会踢屁股？ 编辑：如果有人碰巧有使用Hadoop的用例的演示/说明，那将是很棒的。

28 hadoop 

我将辅助名称节点部署在同一台计算机上是我的主要名称节点： 由于性能和持久性原因，这是错误的（辅助名称节点不是热备用，但确实具有所需元数据的副本）。我找到了有关如何移动namenode的文档，但没有关于移动辅助namenode的文档。 有经验的人知道如何安全地进行此操作吗？

11 hadoop  hbase  cloudera 

我仍然是Hadoop的新手学习者，这次我试图处理一个106GB的文件。我曾经-copyFromLocal将那个大文件复制到我的Hadoop DFS中，但是由于该文件很大，因此我不得不等待很长时间才能了解当前复制状态。 是否可以通过此命令显示当前文件的复制状态？ 预先感谢你们的帮助！

10 hadoop  hdfs 

让我们看看是否有人可以对此主题发表一些看法。 我将在接下来的几天内安装服务器。我的客户想要部署一个Hortonworks HDP，其中有2台服务器作为主服务器，而5台工作服务器。所有这些要求之一是启用NTP。但这就是我所拥有的全部信息，他没有告诉我是否要本地服务器充当NTP服务器，还是希望所有7个服务器充当客户端。操作系统将为Centos 6.6或6.7。 所以我的问题是： 考虑到这将不是生产环境，而更像是“测试”环境，那将是您在这些计算机上配置NTP的选择？所有7个都充当客户端或1-2个服务器和5个客户端？

9 centos  ntp  hadoop 

以下是我使用i3机器的DIY 6节点Hadoop群集的链接， 保护我的设计不受灰尘影响并提供更好的热传递的最佳方法是什么？我应该用什么来覆盖机架的四个侧面以防止灰尘进入？

9 hardware  cluster  hadoop  physical-environment 

问题 第一个目标是独立运行HBase。一旦启动HBase，导航到ip：60010 / master-status即可成功。 第二个目标是运行一个不同的ZooKeeper仲裁。ZooKeeper已下载并启动： netstat -nato | grep 2181 tcp 0 0 :::2181 :::* LISTEN off (0.00/0/0) 的conf/hbase-env.sh更改如下： # Tell HBase whether it should manage it's own instance of Zookeeper or not. export HBASE_MANAGES_ZK=false 为了避免HBase在启动HBase后启动ZooKeeper。 但是，一旦启动HBase，就会发生以下错误。 Could not start ZK at requested port of 2181. ZK was started at …

8 linux  hadoop  hbase  zookeeper  cloudera 

我处于某个硬件的评估阶段，该阶段可用于设置hadoop集群。翻新了该硬件（带有Smart Array 410 / i控制器的hp G6服务器），可能我们应该/必须使用它……我们还没有。我已经阅读到410 / i控制器不允许hadoop要求进行JBOD配置，是否有人可以确认此声明？或不 ？似乎一种解决方法是在每个磁盘上配置raid0，是否又有人确认它或是否存在其他配置方式？谢谢罗布

8 hp  hp-proliant  hadoop  hp-smart-array  storage