2023学年完整公开课版02Mahout与Hadoop的关系

上传人：小*** IP属地：安徽上传时间：2023-05-16 格式：PPTX 页数：7 大小：958.55KB 积分：9.6 举报 版权申诉

已阅读5页，还剩2页未读，继续免费阅读

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

Mahout与Hadoop的关系

2学习任务Mahout与Hadoop的关系MahoutHadoop3Mahout与Hadoop的关系目前开源的云平台有多种,课程采用的云平台是

Hadoop云平台。

Hadoop云平台是个用于处理大数据的分布式应用的开源框架,提供分布式存储和高效计算能力。

Hadoop具有以下优势：同时提供分布式存储和计算能力。具有极高的可扩展性。其主要的组件之一HDFS具有很高的数据吞量。具有软件和硬件容错性。允许大数据的并行工作。

4Mahout与Hadoop的关系在

Hadoop平台下编程不仅要求用户对

Hadoop云平台框架比较熟悉,还要对Hadoop云平台下底层数据流、Map和

Reduce原理非常熟悉,这是基本的编程要求。此外,用户要编写某一个算法还需要对该算法的原理比较熟悉,即需要对算法原理理解透彻。总体来看,编写云平台下的算法程序是属于高难度的开发工作。5Mahout与Hadoop的关系但是,如果使

Mahout,情况就会有很大的不同,用户再也不用自己编写复杂的算法,不需要掌握太高深的云平台的框架和数据流程的理论知识。用户所需要了解的只是算法的大概原理、算法实际应用环境和如何调用

Mahout相关算法的程序接接口。当然,在具体的项目中,用户还应该根据实际需求在

Mahout源代码基础上进行二次开发以满足貝体的实际应用情况。6Mahout与Hadoop的关系Mahout是

Apache基金会的开源项日之ー。

Apache

Mahout起源于2008年,当时它是

Apache

Lucene的子项日。在使用

Hadoop云平台的基础上,可以将其功能有效地扩展到Hadoop云平台中,提高其运算效率。2010年4月

Apache

Mahout最终成为了

Apache的顶级项目。创建此项目的用意是建立一个可扩容的云平台算法库。目前,

Mahout已经实现了多种经典数据挖掘算法,算是比较完备的算法库了。

Mahout目前还在扩充中,由世界上对这个项目感兴趣的云平台算法编程高于们一起进行开发、测试,然后进

人人文库> 全部分类> 教育资料 > 辅导培训

1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。