精华内容
下载资源
问答
  • ubuntu某方面总有些不便,下载个虚拟机装个win7 但是第二次打开的时候就出现了安装是的场景: 原因很简单: 是因为安装了之后没有把win7的镜像文件移除,每次打开时会检测cd/dvd文件/(iso) (暂时没图)...

      ubuntu某方面总有些不便,下载个虚拟机装个win7 但是第二次打开的时候就出现了安装是的场景:

    原因很简单: 是因为安装了之后没有把win7的镜像文件移除,每次打开时会检测cd/dvd文件/(iso)

    (暂时没图)setting-> storage --> .....

    转载于:https://www.cnblogs.com/ediszhao/p/3473704.html

    展开全文
  • 主节点系统是Ubuntu 14.04 LTS x64其他两个节点在VM中系统为Centos 6.4 x64 JVM为jdk1.7_80 hadoop版本2.7.1和2.7.2都尝试了 出现的问题是: 启动hdfs系统正常,都启动起来了,jps查看如下 主节点 SecondaryNameNode和 ...

    集群配置都大同小异,在这里我简单说下我的配置:

    主节点系统是Ubuntu 14.04 LTS x64其他两个节点在VM中系统为Centos 6.4 x64

    JVM为jdk1.7_80

    hadoop版本2.7.1和2.7.2都尝试了

    出现的问题是:

    启动hdfs系统正常,都启动起来了,jps查看如下

    主节点 SecondaryNameNode和 NameNode

    从节点:DataNode

    但使用hfds命令dfsadmin -report发现live的datanode只有1个,而且当你不同时间report,这个存活的节点是交替改变的,一会是datanode1,一会是datanode2

    如下

    hadoop@hadoop:modules$ hdfs dfsadmin -report
    Configured Capacity: 16488800256 (15.36 GB)
    Present Capacity: 13008093184 (12.11 GB)
    DFS Remaining: 13008068608 (12.11 GB)
    DFS Used: 24576 (24 KB)
    DFS Used%: 0.00%
    Under replicated blocks: 0
    Blocks with corrupt replicas: 0
    Missing blocks: 0
    Missing blocks (with replication factor 1): 0
    
    -------------------------------------------------
    Live datanodes (1):
    
    Name: 192.168.2.3:50010 (hadoop)
    Hostname: hadoop1
    Decommission Status : Normal
    Configured Capacity: 16488800256 (15.36 GB)
    DFS Used: 24576 (24 KB)
    Non DFS Used: 3480969216 (3.24 GB)
    DFS Remaining: 13007806464 (12.11 GB)
    DFS Used%: 0.00%
    DFS Remaining%: 78.89%
    Configured Cache Capacity: 0 (0 B)
    Cache Used: 0 (0 B)
    Cache Remaining: 0 (0 B)
    Cache Used%: 100.00%
    Cache Remaining%: 0.00%
    Xceivers: 1
    Last contact: Mon May 09 17:30:08 CST 2016
    
    

    再次report

    hadoop@hadoop:modules$ hdfs dfsadmin -report
    Configured Capacity: 16488800256 (15.36 GB)
    Present Capacity: 13008007168 (12.11 GB)
    DFS Remaining: 13007982592 (12.11 GB)
    DFS Used: 24576 (24 KB)
    DFS Used%: 0.00%
    Under replicated blocks: 0
    Blocks with corrupt replicas: 0
    Missing blocks: 0
    Missing blocks (with replication factor 1): 0
    
    -------------------------------------------------
    Live datanodes (1):
    
    Name: 192.168.2.3:50010 (hadoop)
    Hostname: hadoop2
    Decommission Status : Normal
    Configured Capacity: 16488800256 (15.36 GB)
    DFS Used: 24576 (24 KB)
    Non DFS Used: 3480793088 (3.24 GB)
    DFS Remaining: 13007982592 (12.11 GB)
    DFS Used%: 0.00%
    DFS Remaining%: 78.89%
    Configured Cache Capacity: 0 (0 B)
    Cache Used: 0 (0 B)
    Cache Remaining: 0 (0 B)
    Cache Used%: 100.00%
    Cache Remaining%: 0.00%
    Xceivers: 1
    Last contact: Mon May 09 17:34:06 CST 2016
    
    

    奇怪了..同时,通过web ui 50070查看datanode存活的节点时候,只能有1个.而且当你刷新页面,这个存活的节点是变化的,同上

    一开始我没这样看,我是通过dfs -mkdir /test,然后put文件,出现IO传输异常..主要异常内容如下

    <pre name="code" class="html">hdfs.DFSClient: org.apache.hadoop.ipc.RemoteException: Java.io.IOException:
    could only be replicated to 0 nodes, instead of 1
    
    

    我就纳闷了,先是检验每个机器的防火墙,Selinux,然后互ping,然后ssh连接测试都没有问题..

    一切都正常啊,为何会报传输异常...

    截取一部分日志如下;

    2016-05-10 01:29:54,148 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Block pool Block pool BP-1877985316-192.168.2.3-1462786104060 (Datanode Uuid c31e3853-b15e-46d8-abd0-ac1d1ed4572b) service to hadoop/192.168.2.3:9000 successfully registered with NN
    2016-05-10 01:29:54,151 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Successfully sent block report 0x44419c23fe,  containing 1 storage report(s), of which we sent 1. The reports had 0 total blocks and used 1 RPC(s). This took 0 msec to generate and 2 msecs for RPC and NN processing. Got back one command: FinalizeCommand/5.
    2016-05-10 01:29:54,152 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Got finalize command for block pool BP-1877985316-192.168.2.3-1462786104060
    2016-05-10 01:29:57,150 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: DatanodeCommand action : DNA_REGISTER from hadoop/192.168.2.3:9000 with active state
    2016-05-10 01:29:57,153 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Block pool BP-1877985316-192.168.2.3-1462786104060 (Datanode Uuid c31e3853-b15e-46d8-abd0-ac1d1ed4572b) service to hadoop/192.168.2.3:9000 beginning handshake with NN
    

    这段日志一直在重复,每2-3秒重复一次,另一个节点也是.

    另外我查看了虚拟机右下角的网络传输信号灯,也是基本没隔1秒闪一下,说明每一秒主节点和从节点进行了一次ssh交互,起初没在意..以为是心跳..

    其实如果是正常情况下,只有每一次ssh 提出一个requets的时候,才会闪烁一下,我是这么理解的


    然后查阅官方文档,参考其他网上资源和问题,都试了都不行...纳闷死了..

    小修改了一些自己的配置文件,但只要基本的东西配置的没错,小改动的都是没多大关系的.这个是我配置的文件:

    core-site.xml

    <configuration>
        <property>
            <name>fs.defaultFS</name>
            <value>hdfs://hadoop:9000</value>
        </property>
    
        <property>
            <name>hadoop.tmp.dir</name>
            <value>/opt/modules/hadoop-2.7.2/data/tmp</value>
        </property>
        <property>
                    <name>io.file.buffer.size</name>
                    <value>131072</value>
            </property>
            <property>
                   <name>hadoop.proxyuser.hadoop.hosts</name>
                   <value>*</value>
           </property>
           <property>
                   <name>hadoop.proxyuser.hadoop.groups</name>
                   <value>*</value>
           </property>
    </configuration>
    hdfs-site.xml

    <configuration>
    	<property>
    		<name>dfs.namenode.secondary.http-address</name>
    		<value>hadoop:50090</value>
    	</property>
    	<property>
    		<name>dfs.replication</name>
    		<value>2</value>
    	</property>
    	<property>
    		<name>dfs.permissions.enabled</name>
    		<value>false</value>
    	</property>
            <property>
                 <name>dfs.namenode.name.dir</name>
                 <value>file:/opt/modules/hadoop-2.7.2/data/dfs/name</value>
    	</property>
    	<property>
    		<name>dfs.datanode.data.dir</name>
    		<value>file:/opt/modules/hadoop-2.7.2/data/dfs/data</value>
    	</property>
    	<property>
    		<name>dfs.webhdfs.enabled</name>
    		<value>true</value>
    	</property>
    </configuration>

    这里只关系到hdfs文件系统,所以mapred-site.xml和yarh-sitexml在这里就不累述了.

    经过无数次的namnode format和删除data, /tmp目录下的文件,都无济于事,后来我开始怀疑是hadoop版本问题,试了试从一开始hadoop2.7.1改为2.7.2,还一样,然后开始怀疑Ubuntu的问题..我接着转到我Win7系统上,在虚拟机里运行三个节点,上传一个文件成功,十分顺利啊,,我就纳闷了..这是unbutu哪里的问题,,,

    说来说去都是关系这节点ssh传输问题..我就开始想会不会是虚拟机的网络问题..我就换了几个DNS,从VM中Net适配器在Ubuntu中的ip xx.xx.xx.1换到我Ubunt接入外网的路由器ip,xx.xx.xx.1,都没啥问题啊,各个节点ping自己,网关,互ping和外网,都很顺..说明不是这里的问题..

    最后一个尝试了.这里我设的是VM Net链接方式...改成桥接模式..配置一个外网的DNS,,.然后重新format Namenode,启动hdfs...检查Datanode报告,上传文件测试,,,一切顺利..终于改成功了..


    put一个文件


    web ui查看,存活的两个节点都显示出来了,不会跟之一样只出现一个..

    个人总结;

    启动hdfs文件系统,启动节点启动正常,但是datanode个数不正常,put文件时报IO错.

    无外乎

    1配置的slave或者hdfs-site.xml有问题

    2ssh传输有问题..

    3 网络传输比如网关,DNS,ip配置,hosts文件出现了问题..

    4 以上都设置正常,在换一种方式测试链接.比如改变虚拟机的Net或者桥接方式,


    要从这里着手,像这种比较少见的问题,只能自己一个个试着调了..

    关于Ubuntu下的Vm虚拟机Net方式连接为何会导致这种单线传输的问题,我也不是很了解..希望了解的补充以下..

    毕竟只有hadoop传输有问题,其他的比如虚拟机中ping,联网,传文件,ssh访问之类的,都很顺利

    展开全文
  • 记录ubuntu虚拟机vm中提示磁盘空间不足处理前言准备开始对VM虚拟机进行磁盘扩展使用GParted 对ubuntu进行分区最后 前言 在学习海思开发板使用虚拟机的时候,因为下载的源码太大导致还没下完就提示虚拟机内存不足...


    前言

    在学习海思开发板使用虚拟机的时候,因为下载的源码太大导致还没下完就提示虚拟机内存不足。 无奈之下找了度娘,顺手记录一下,想要学习海思开发板的请

    移步


    准备

    `df` 查看当前文件系统的磁盘使用情况,这是我加过20G的样子,就这已经有被用的差不多了,因为一般情况下97%左右就会提醒磁盘满了;所以准备再加40G。

    在这里插入图片描述


    开始

    对VM虚拟机进行磁盘扩展

    关闭当前使用虚拟机,点击`**编辑虚拟机设置**`--`**选择磁盘**`--`**点击扩展**`--`**输入要扩展的数额**`--`**点击扩展**`

    在这里插入图片描述

    等待扩展完成后启动虚拟机
    在这里插入图片描述在这里插入图片描述
    我们进入后会发现并没有直接扩充完毕,那我们就需要进行分区了。
    在这里插入图片描述

    使用GParted 对ubuntu进行分区

    来吧展示,首先安装GParted sudo apt-get install gparted 然后sudo gparted运行,也可以搜索后右键运行。
    在这里插入图片描述
    可以看到有40G 是未分配的,然后是之前40个G使用的是38个G 还有两个G是给交换分区的,但是我们这个时候直接去右键sda1是没有办法获得未分配的空间的。怎么办呢?
    在这里插入图片描述
    右键禁用交换分区,然后删除掉扩展区,然后在为主分区增加38个G(别问为啥不是40个G,你把交换分区删了不要重新分配啊)

    1. 右键禁用交换空间
      在这里插入图片描述
      2.右键删除逻辑分区
      在这里插入图片描述
      3.删除交换空间

    在这里插入图片描述
    4.右键更改主分区大小
    在这里插入图片描述
    5.直接输入2048点击调整大小
    在这里插入图片描述

    6、右键未分配,点击新建,选择扩展分区,点添加

    在这里插入图片描述
    7.右键未分配,新建,选择逻辑分区,选择系统为linux-swap 点击添加

    **加粗样式**
    8.点击√,打完收工

    在这里插入图片描述
    在这里插入图片描述

    在这里插入图片描述


    最后

    感谢技术支持

    展开全文
  • Oracle VM VirtualBox安装Ubuntu虚拟机教程

    千次阅读 2019-07-13 09:23:55
    Oracle VM VirtualBox安装Ubuntu虚拟机教程(https://www.jianshu.com/p/fba87fa4f028)

    Oracle VM VirtualBox安装Ubuntu虚拟机教程(https://www.jianshu.com/p/fba87fa4f028)

    展开全文
  • win10使用vm安装ubuntu虚拟机过程错误集合-附件资源
  • 虚拟机VM安装ubuntu

    2019-06-28 23:43:33
    文章目录一、教程1.Vmware2.Kail Linux3.Ubuntu二、问题 一、教程 1.Vmware 最新超详细VMware虚拟机下载安装教程: https://blog.csdn.net/qq_40950957/article/details/80467513 密钥: ...
  • 本篇博客是工具下载类博文,提供虚拟机VMware-workstation-full-12.5.2和常用操作系统Ubuntu的下载。 虚拟机VMware-workstation-full-12.5.2 操作系统Ubuntu 虚拟机VMware-workstation-full-12.5.2 VMware ...
  • ubuntu下安装虚拟机VM

    2016-10-22 13:36:06
    点击next 指定虚拟机的存储路径 点击’next’ 指定工作站的https端口,然后点击next 输入激活码,如果你想使用试用版的话,可以让它空着 点击‘install’,开始安装 正在安装。。。。 安装完成。。。...
  • 先下载ISO镜像 下载地址:http://mirrors.melbourne.co.uk/ubuntu-releases/ Oracle VM VirtualBox安装Ubuntu虚拟机安装过程 文章地址:https://blog.csdn.net/tangyajun_168/article/details/7063448 ...
  • 文章目录VirtualBox 安装 Ubuntu 虚拟机下载并安装 VirtualBox新建 Ubuntu 虚拟机安装增强功能设置 root 密码导出虚拟机,减少下次安装时间 VirtualBox 安装 Ubuntu 虚拟机 相比于 VM,VirtualBox 为开源免费,功能...
  • 虚拟机上安装PyCharm,打开软件后系统卡死,最后删除PyCharm安装文件后发现虚拟机无法联网。重启虚拟机无效。 解决办法: 打开终端,依次输入并运行以下三行代码。 停止 sudo service network-manager stop ...
  • 打开虚拟机设置,找到要扩容的磁盘路径,先记下这个路径,后面要用。 用everything搜索到VBoxManage.exe的位置,打开cmd。输入: VBoxManage modifyhd "要扩容的磁盘路径" --resize 20480  注意:...
  • 解决win10下虚拟机vmubuntu如何联网问题,以及如何安装tree 解决win10下虚拟机ubuntu如何联网问题 https://jingyan.baidu.com/article/39810a2342f222b637fda648.html 解决如何安装tre问题 ... ...
  • VMUbuntu虚拟机设置以减小内存消耗

    千次阅读 2015-09-10 11:00:10
    设置Ubuntu虚拟机启动时是字符终端,不启动图形桌面的方法如下: sudo vi /etc/default/grub 找到其中的参数"quiet splash"修改为"text",保存退出。 sudo update-grub 在sudo reboot重启后就是字符终端啦,想启动...
  • 安装虚拟机VM15的安装包可以微信关注 电脑学习 里面有VM15的网盘链接和具体安装步骤 该教程是我在下载的过程中参考了其他教程但仍然是下载不了之后,自己的一个下载方法 安装Ubuntu18.04.3 建议在Ubuntu的官方网站...
  • 虚拟机VM Virtual Box 下ubuntu 编译内核 与 简单的Hello Word模块的添加删除教程
  • 虚拟机VM+Ubuntu_18.04

    2018-06-13 00:58:05
    为了提高软件下载速度...Enter 输入密码,将当前用户更换为root最高权限sudo gedit /etc/apt/sources.list 窗口打开源文件将下列粘贴到sources.list的最上方deb http://mirrors.aliyun.com/ubuntu/ bionic main res...
  • 首先,安装ubuntu虚拟机: 参考博客https://blog.csdn.net/weixin_37228977/article/details/81355649 版权声明:本文为CSDN博主「愤怒的芒果」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本...
  • 工作环境为Oracle VM VirtualBox下安装的Ubuntu虚拟机,原有虚拟机的虚拟机硬盘为20G,在安装新的软件时提示没有足够的剩余空间安装软件。 由于接触linux操作系统时间较短,只能问度娘如何解决,现根据度娘提供的...
  • 系统:Ubuntu 18.04 虚拟机软件:VMware Workstation 15 安装 open-vm-tools 在终端中使用 apt-get 安装 open-vm-tools sudo apt-get install open-vm-tools sudo apt-get install open-vm-tools-desktop 重启后,...
  • 打开ubuntu虚拟机后选择Device,如下图红色方框的图标,然后在下拉选项中把选项中的sharedclipboard和drag and Drop全部设置为Bidirectional。如图中1所示。然后选择图中2箭头指向的位置,Insert Guest Additions CD...
  • vmware-tools的好处不用多说,比如解决窗口适应问题,能够与主机自由拖放文件或者复制粘贴等等,但是vmware-tools安装比较麻烦,网上有虚拟机设置,安装镜像什么的,特别麻烦。 而Open VM Tools (open-vm-tools) 是...
  • 前言:最近需要使用到ubuntu虚拟机通过nfs服务连接开发板下载程序,结果遇到了ping不通的问题,多方查找找到了原因,记录一下 先用网线连接开发板与虚拟机 1.打开VMvare虚拟网络编辑设置,选择桥接模式 2.选择VM0...
  • 解压jdk 在jdk文件夹里 开启终端 输入pwd指令 复制jdk的路径 获取root权限 进入/etc 修改/etc里的profile文本末尾加入以下内容export JAVA_HOME=/home/runqi/jdk1.8.0_161 export CLASSPATH=.:$JAVA_HOME/lib/dt....
  • 我们在VM中安装好Ubuntu 虚拟机...1、 查看Ubuntu虚拟机IP地址; 命令:ifconfig 2、 利用XShell等工具进行远程连接; 命令:ssh ip地址 这里就是:ssh 192.168.127.215 发现连接失败; 3、 进入Ubuntu 查看2...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 3,261
精华内容 1,304
关键字:

ubuntu虚拟机vm