实验报告学号:姓名 专业 班级 9第15周
实验背景
1. 在云计算及其相关应用日益火爆的今天我们通过课堂上老师讲述的云计算相关的基本知识 已经对于利用Hadoop的配置实现一个较为简单的云计算环境有了一定的认识 因此在本课程的期末设计中我们采用Linux下的Hadoop搭建来运行一些简单的程序比如Wordcount来达成对云计算的实现的基本知识的学习效果
2. 本实验中使用的是MapReduce的编程模型 采用“分而治之”的基本思想 把对大规模数据集的操作分发给一个主节点管理下的各个分节点共同完成然后通过整合各个节点的中间结果得到最终结果。简单地说 MapReduce就是"任务的分解与结果的汇总"
3. 在Hadoop中用于执行MapReduce任务的机器角色有两个一个是JobTracker 另一个是TaskTracker JobTracker是用于调度工作的 TaskTracker是用于执行工作的。一个Hadoop集群中只有一台JobTracker
4. 但是值得注意的一点是若要使用本实验中的MapReduce来处理数据集或任务 其必须具备如下特点待处理的数据集可以分解成许多小的数据集而且每一个小数据集都可以完全并行地进行处实验。
内容
算
虚拟机安装
序、
步骤 1. 首先我们找到比较常用的Linux适用版本镜像文件这里我们使用的是图形化做得非常好的和方 Ubuntu 然后使用UltraISO做出一个启动盘并在电脑上做出一个双系统 分区大小我们参照网络上法 的建议将主分区目录设置为20G成功做出一个Linux系统这里我忘了截图了
装机的过程和下面的虚拟机装机是一样的。
2. 然后我们在完成Linux下的基础软件安装的情况下进行程序的KVM虚拟机安装首先使用如下指令 $eg rep-o' vmx|svm ' /proc/cpu info检查Lin ux是否支持安装KVM结果显示是可以安装的于是我们这里使用指令 $apt-get instal l qemu-kvml ibvirt-bin virt-managerbridge-utils安装KVM虚拟机安装过程是自动完成的如下图所示
3. 经验证我们发现KVM是安装成功并且正常运行的安装成功的验证指令为 #lsmod|grep kvm到这里KVM的安装就基本完成了。
4. 然后我们需要在KVM上创建一个虚拟机具体操作步骤如下在根下创建images目录在
Digital-VM商家的暑期活动促销,这个商家提供有多个数据中心独立服务器、VPS主机产品。最低配置月付80美元,支持带宽、流量和IP的自定义配置。Digital-VM,是2019年新成立的商家,主要从事日本东京、新加坡、美国洛杉矶、荷兰阿姆斯特丹、西班牙马德里、挪威奥斯陆、丹麦哥本哈根数据中心的KVM架构VPS产品销售,分为大硬盘型(1Gbps带宽端口、分配较大的硬盘)和大带宽型(10Gbps...
老薛主机怎么样?老薛主机这个商家有存在有一些年头。如果没有记错的话,早年老薛主机是做虚拟主机业务的,还算不错在异常激烈的市场中生存到现在,应该算是在众多商家中早期积累到一定的用户群的,主打小众个人网站业务所以能持续到现在。这不,站长看到商家有在进行夏季促销,比如我们很多网友可能有需要的香港vps主机季度及以上可以半价优惠,如果有在选择不同主机商的香港机房的可以看看老薛主机商家的香港vps。点击进入...
webhosting24决定从7月1日开始对日本机房的VPS进行NVMe和流量大升级,几乎是翻倍了硬盘和流量,当然前提是价格依旧不变。目前来看,国内过去走的是NTT直连,服务器托管机房应该是CDN77*(也就是datapacket.com),加上高性能平台(AMD Ryzen 9 3900X+NVMe),这样的日本VPS还是有相当大的性价比的。官方网站:https://www.webhosting...