久久精品人人爽,华人av在线,亚洲性视频网站,欧美专区一二三

Ambari和ClouderaManager是什么

154次閱讀
沒有評論

共計 1931 個字符,預計需要花費 5 分鐘才能閱讀完成。

本篇內容主要講解“Ambari 和 ClouderaManager 是什么”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓丸趣 TV 小編來帶大家學習“Ambari 和 ClouderaManager 是什么”吧!

1、什么是 CDH,Ambari?

Apache Ambari 是一種基于 Web 的工具,支持 Apache Hadoop 集群的供應、管理和監控。Ambari 已支持大多數 Hadoop 組件,包括 HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop 和 Hcatalog 等。

Apache Ambari 支持 HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop 和 Hcatalog 等的集中管理。也是 5 個頂級 hadoop 管理工具之一。Ambari 能夠安裝安全的(基于 Kerberos)Hadoop 集群,以此實現了對 Hadoop 安全的支持,提供了基于角色的用戶認證、授權和審計功能,并為用戶管理集成了 LDAP 和 Active Directory。

CDH 簡介

? Cloudera s Distribution, including Apache Hadoop
? 是 Hadoop 眾多分支中的一種,由 Cloudera 維護,基于穩定版本的 Apache Hadoop 構建
? 提供了 Hadoop 的核心
– 可擴展存儲
– 分布式計算
? 基于 Web 的用戶界面

CDH 的優點

? 版本劃分清晰
? 版本更新速度快
? 支持 Kerberos 安全認證
? 文檔清晰
? 支持多種安裝方式(Cloudera Manager 方式

2、為什么需要他們

? 1000 臺服務器的集群,最少要花費多長時間來搭建好 Hadoop 集群,包括 Hive、Hbase、Flume、Kafka、Spark 等等
? 只給你一天時間,完成以上工作?
? 對于以上集群進行 hadoop 版本升級,你會選擇什么升級方案,最少要花費多長時間?

? 新版本的 Hadoop,與 Hive、Hbase、Flume、Kafka、Spark 等等兼容?

大數據集群管理方式分為手工方式(Apache hadoop)和工具方式(Ambari + hdp 和 Cloudera Manger + CDH)。

  手工部署呢,需配置太多參數,但是,好理解其原理,建議初學這樣做,能學到很多。該方式啊,均得由用戶執行,細節太多,切當設計多個組件時,用戶須自己解決組件間版本兼容問題。

  工具部署呢,比如 Ambari 或 Cloudera Manger。(當前兩大最主流的集群管理工具,前者是 Hortonworks 公司,后者是 Cloudera 公司)使用工具來,可以說是一鍵操作,難點都在工具 Ambari 或 Cloudera Manger 本身部署上。

手工方式和工具方式比較:

比較點

手工方式

工具方式

難易度

難,幾乎不可能成功

簡單,易行

兼容性

自己解決組件兼容性問題

自動安裝兼容組件

組件支持數

支持全部組件

支持常用組件

優點

對組件和集群管理深刻

簡單、容易、可行

缺點

太復雜,不容易成功

屏蔽太多細節,妨礙對組件理解

工具比較:

詳細對比情況如下:

出版商:

hortonworks 研發了 Ambari 和 hdp 的大數據分析集成平臺
cloudera 研發了 cloudera manger 和 cdh 大數據分析集成平臺
穩定性:

cloudera 相對來說比較穩定
ambari 相對來說不穩定(頁面打開速度慢)
資源消耗:

cloudera manager 的 server 端 Xmx 是 2G,agent 是 1G, 但是有 host monitor 和 service monitor 總共大概 1G
ambari 的 server 端 Xmx 是 2G,metric 的 ams 和 hbase 的 env 大概也就是 2G
集群重啟:

cloudera 支持滾動重啟 (hdfs 需要設計成 ha, 才能滾動重啟)
ambari 支持滾動重啟(hdfs 需要設計成 ha, 才能滾動重啟)
集群升級(一般來講不要輕易升級集群):

cloudera 不支持滾動升級服務
ambari 支持滾動升級服務(這個是 ambari 的優點,hdfs 必須是 ha)
二次開發:

cloudera 不支持
ambari 支持
服務版本:

cloudera 較老
ambari 較新
服務集成性:

cloudera 較弱
ambari 較強, 支持 es、redis、presto、kylin 等
體驗效果:

cloudera 好
ambari 相對差
安裝過程:

cloudera 復雜
ambari 簡單
郵件報警:

cloudera 支持不好
ambari 支持很好
安裝包:

cloudera 是 parcel 包
ambari 是 rpm 包

到此,相信大家對“Ambari 和 ClouderaManager 是什么”有了更深的了解,不妨來實際操作一番吧!這里是丸趣 TV 網站,更多相關內容可以進入相關頻道進行查詢,關注我們,繼續學習!

正文完
 
丸趣
版權聲明:本站原創文章,由 丸趣 2023-08-04發表,共計1931字。
轉載說明:除特殊說明外本站除技術相關以外文章皆由網絡搜集發布,轉載請注明出處。
評論(沒有評論)
主站蜘蛛池模板: 克拉玛依市| 新蔡县| 桂东县| 西华县| 上虞市| 泸水县| 邯郸县| 封开县| 哈尔滨市| 滨海县| 买车| 抚州市| 东乡| 济宁市| 阳泉市| 怀来县| 黄石市| 满洲里市| 巴彦淖尔市| 九龙坡区| 任丘市| 晴隆县| 容城县| 康平县| 黔西| 六安市| 苗栗县| 新沂市| 莒南县| 河南省| 阜康市| 九龙城区| 互助| 开江县| 马山县| 郴州市| 乐平市| 临西县| 屏边| 福建省| 金塔县|