日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

apache mesos_在Twitter上使用Apache Mesos和Apache Aurora进行资源调度和任务启动

發布時間:2023/12/3 编程问答 44 豆豆
生活随笔 收集整理的這篇文章主要介紹了 apache mesos_在Twitter上使用Apache Mesos和Apache Aurora进行资源调度和任务启动 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

apache mesos

播客的第23集是與Bill Farner的談話

Bill解釋了Twitter如何使用Apache Mesos和Apache Aurora在硬件上獲得更多收益,并通過在整個基礎架構中利用細粒度的資源調度來節省工程時間(開發和運營)。 Bill談到了他在Borg上與Google一起在Google上所見到和所經歷的力量是如何想在Twitter上運行事物以及他們為Aurora打造什么的。 經過多年在Twitter上的生產運行之后,Aurora是開源的,是Apache基金會的一部分,可以使用。 他們看不到的許多新用例對于他們的團隊來說已經變得非常強大,Bill也對此進行了更詳細的介紹。

Bill還談到了使用Aurora中的功能完成的檢測的類型,以使現在Twitter上的所有新系統和幾乎所有舊系統都在Aurora上運行。 Bill詳細介紹了有關Twitter緩存的工作方式以及Aurora的SLA功能如何使其成為現實。 Aurora令人驚嘆,它為最終用戶(從工程師到分析師的每個人)提供了完全訪問其硬件群集的潛在資源的能力。 Aurora提供了配額和搶占等功能,因此可以為任何用戶提供對整個硬件基礎架構的計算資源的訪問權限,而不必擔心會浪費資源并始終將生產始終作為優先事項。

Apache Mesos從計算機(物理或虛擬)中提取CPU,內存,存儲和其他計算資源,從而使容錯和彈性的分布式系統易于構建和有效運行。 Mesos是使用與Linux內核相同的原理構建的,只是在不同的抽象級別上。 Mesos內核在每臺機器上運行,并為應用程序(例如Hadoop,Spark,Kafka,Elastic Search)提供API,用于在整個數據中心和云環境中進行資源管理和調度。

Apache Aurora是一個Mesos框架。 Mesos框架是資源的調度程序和任務的啟動程序。 Aurora提供的Job抽象由Task模板和用于創建該Task幾乎相同的副本的說明組成。 通常,任務是與單個命令行相對應的單個進程 ,例如python2.6 my_script.py 。 但是,有時您必須在單個任務中將單獨的進程并置在一起,這些任務在單個容器和chroot (通常稱為“沙盒”)中運行。 例如,如果您同時運行多個協作代理,例如logrotate , installer以及主或從屬進程。 Thermos在Mesos任務下提供了過程抽象。

要使用Aurora并快速入門,您應該按以下順序查看此目錄中的文檔:

  • 如何在私人計算機上的虛擬機上 部署Aurora或如何安裝Aurora (本教程使用虛擬機方法)。
  • 作為用戶,您可以通過Tutorial快速入門。
  • 有關引擎蓋下Aurora處理流程的概述,請參閱《 用戶指南》 。
  • 要了解如何編寫配置文件,請參閱我們的配置教程 。 從那里,查看Aurora + Thermos Reference 。
  • 然后在Aurora命令行客戶端上閱讀。
  • 查找有關Aurora如何執行資源隔離的常規信息和有用的技巧。
  • 有關Mesos和Aurora的更多背景知識,請查看以下三個視頻。

    使用Apache Mesos進行數據中心管理

    Apache Aurora簡介視頻

    Apache Aurora的過去,現在和未來

    翻譯自: https://www.javacodegeeks.com/2014/10/resource-scheduling-and-task-launching-with-apache-mesos-and-apache-aurora-at-twitter.html

    apache mesos

    總結

    以上是生活随笔為你收集整理的apache mesos_在Twitter上使用Apache Mesos和Apache Aurora进行资源调度和任务启动的全部內容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。