实验报告学号:姓名 专业 班级 9第15周
实验背景
1. 在云计算及其相关应用日益火爆的今天我们通过课堂上老师讲述的云计算相关的基本知识 已经对于利用Hadoop的配置实现一个较为简单的云计算环境有了一定的认识 因此在本课程的期末设计中我们采用Linux下的Hadoop搭建来运行一些简单的程序比如Wordcount来达成对云计算的实现的基本知识的学习效果
2. 本实验中使用的是MapReduce的编程模型 采用“分而治之”的基本思想 把对大规模数据集的操作分发给一个主节点管理下的各个分节点共同完成然后通过整合各个节点的中间结果得到最终结果。简单地说 MapReduce就是"任务的分解与结果的汇总"
3. 在Hadoop中用于执行MapReduce任务的机器角色有两个一个是JobTracker 另一个是TaskTracker JobTracker是用于调度工作的 TaskTracker是用于执行工作的。一个Hadoop集群中只有一台JobTracker
4. 但是值得注意的一点是若要使用本实验中的MapReduce来处理数据集或任务 其必须具备如下特点待处理的数据集可以分解成许多小的数据集而且每一个小数据集都可以完全并行地进行处实验。
内容
算
虚拟机安装
序、
步骤 1. 首先我们找到比较常用的Linux适用版本镜像文件这里我们使用的是图形化做得非常好的和方 Ubuntu 然后使用UltraISO做出一个启动盘并在电脑上做出一个双系统 分区大小我们参照网络上法 的建议将主分区目录设置为20G成功做出一个Linux系统这里我忘了截图了
装机的过程和下面的虚拟机装机是一样的。
2. 然后我们在完成Linux下的基础软件安装的情况下进行程序的KVM虚拟机安装首先使用如下指令 $eg rep-o' vmx|svm ' /proc/cpu info检查Lin ux是否支持安装KVM结果显示是可以安装的于是我们这里使用指令 $apt-get instal l qemu-kvml ibvirt-bin virt-managerbridge-utils安装KVM虚拟机安装过程是自动完成的如下图所示
3. 经验证我们发现KVM是安装成功并且正常运行的安装成功的验证指令为 #lsmod|grep kvm到这里KVM的安装就基本完成了。
4. 然后我们需要在KVM上创建一个虚拟机具体操作步骤如下在根下创建images目录在
百纵科技湖南百纵科技有限公司是一家具有ISP ICP 电信增值许可证的正规公司,多年不断转型探索现已颇具规模,公司成立于2009年 通过多年经营积累目前已独具一格,公司主要经营香港服务器,香港站群服务器,美国高防服务器,美国站群服务器,云服务器,母机租用托管!美国CN2云服务器,美国VPS,美国高防云主机,美国独立服务器,美国站群服务器,美国母机。美国原生IP支持大批量订货 合作 适用电商 亚马逊...
恒创科技也有暑期的活动,其中香港服务器也有一定折扣,当然是针对新用户的,如果我们还没有注册过或者可以有办法注册到新用户的,可以买他们家的香港服务器活动价格,2M带宽香港云服务器317元。对于一般用途还是够用的。 活动链接:恒创暑期活动爆款活动均是针对新用户的。1、云服务器仅限首次购买恒创科技产品的新用户。1 核 1G 实例规格,单个账户限购 1台;其他活动机型,单个账户限购 3 台(必须在一个订单...
CloudCone 商家也是比较有特点的,和我们熟悉的DO、Vultr、Linode商家均是可以随时删除机器开通的小时计费模式。这个对于有需要短租服务器的来说是比较有性价比的。但是,他们还有一个缺点就是机房比较少,不同于上面几个小时计费服务商可以有多机房可选,如果有这个多机房方案的话,应该更有特点。这次我们可以看到CloudCone闪购活动提供洛杉矶三个促销方案,低至月付1.99美元。商家也可以随...