Tag: hadoop

在Ubuntu 14.0.4上禁用iPv6的问题

要在Ubuntu 14.0.4（LTS）上禁用iPv6，我在sysctl.conf文件中添加了以下行： net.ipv6.conf.all.disable_ipv6 = 1 net.ipv6.conf.default.disable_ipv6 = 1 net.ipv6.conf.lo.disable_ipv6 = 1 因为我得到0，当我使用命令时： $ cat /proc/sys/net/ipv6/conf/all/disable_ipv6 据我所知，我按照给出的步骤。 当我尝试使用时： sudo sysctl -p 我在终端输出一个输出： sysctl: cannot stat /proc/sys/net/ipv6/conf/disable_ipv6: No such file or directory net.ipv6.conf.default.disable_ipv6 = 1 net.ipv6.conf.lo.disable_ipv6 = 1 我检查了目录，发现文件/目录存在。 其他信息：我正在尝试在我的系统中安装Apache Hadoop（版本2.7.2）。 虽然所有服务都已启动并运行，但我不确定它是否适用于我的网络配置。 由于（ 这里 ）通知Hadoop与iPv6连接不兼容，所以我尝试运行： sudo sed -i ‘s/net.ipv6.bindv6only\ =\ 1/net.ipv6.bindv6only\ =\ 0/’ \/etc/sysctl.d/bindv6only.conf && sudo invoke-rc.d […]

start-dfs.sh上的权限被拒绝

我正在尝试按照本指南创建一个双节点Hadoop集群。 一个节点是我的Ubuntu笔记本电脑，第二个节点是一个也运行Ubuntu的虚拟机。 我在主节点做： gsamaras@gsamaras:/home/hadoopuser/hadoop/sbin$ sudo ./start-dfs.sh 16/01/23 04:46:16 WARN hdfs.DFSUtil: Namenode for null remains unresolved for ID null. Check your hdfs-site.xml file to ensure namenodes are configured properly. Starting namenodes on [master] master: ssh: Could not resolve hostname master: Name or service not known root@localhost’s password: root@localhost’s password: localhost: Permission denied, please try again. 如果现在我编辑我的/etc/hosts/文件到这个： […]

Hadoop包中的hadoop-ec2-env.sh在哪里？

我无法找到文件hadoop-ec2-env.sh 。 我从http://mirror.olnevhost.net/pub/apache/hadoop/common/stable/下载并安装了hadoop_1.0.4-1_x86_64.deb 这是最新的稳定版本。 我想在EC2上运行hadoop。 我正在按照一个教程说： 编辑src / contrib / ec2 / bin / hadoop-ec2-env.sh中的所有相关变量。 hadoop-ec2-env.sh在哪里？

Ubuntu中的Hadoop：无法创建无密码SSH

我正在学习Hadoop并尝试按照Book中的定义中的过程创建无密码SSH： Hadoop：The Definitive guide 配置SSH 伪分布模式只是完全分布式模式的一种特殊情况，其中（单个）主机是localhost，因此我们需要确保我们可以SSH到localhost并登录而无需输入密码。 首先，确保安装了 SSH 并且服务器正在运行 （我不确定这是什么，它们是什么意思）。 例如，在Ubuntu上，这是通过以下方式实现的： sudo apt-get install ssh 然后，要启用无密码登录，请使用空密码生成新的SSH密钥： ssh-keygen -t rsa -P ” -f ~/.ssh/id_rsa cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 如果您正在运行可以连接的ssh-agent.Test，则可能还需要运行ssh-add ： ssh localhost 如果成功，您不必输入密码。 一切似乎工作正常，但它仍然要求密码。 我正在提供我的登录密码，我也用它来访问Root。 但它根本不起作用。 请建议。 添加更多信息。 我删除了旧密钥并添加了新密钥。 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 我之后的文件权限是 -rw-rw-r– 1 incredible incredible 403 मई 24 17:16 authorized_keys -rw——- 1 incredible […]

安装zookeeper-server时出现软件包损坏

我正在运行Ubuntu 14.04 LTS（Trusty），并尝试按照本教程安装Cloudera Hadoop with Yarn。 在我选择的选项下To add the CDH 5 repository:以及trusty操作系统的自定义URL。 然后我安装了Zookeeper，但在安装Zookeeper-Server时它给了我以下错误： $ sudo apt-get install zookeeper-server Reading package lists… Done Building dependency tree Reading state information… Done Some packages could not be installed. This may mean that you have requested an impossible situation or if you are using the unstable distribution that some […]