Apache Mesos

Apache Mesosは、コンピュータ・クラスタを管理するためのオープンソースプロジェクトである。カリフォルニア大学バークレー校で開発された。 当初、MesosはUC Berkeley RAD Labの研究プロジェクトとしてPhDの学生だったBenjamin Hindman、Andy Konwinski、Matei Zaharia（英語版）と、教授のIon Stoica（英語版）により始められた。学生たちは、David Culler（英語版）が教えていた授業のプロジェクトとして開発を始めた。始めはNexusという名前だったが、他の大学のプロジェクトと名称がかぶっていたため、Mesosという名前に変更された。 2009年のHotCloud '09において、Andy Konwinskiによって（まだNexusという名前で）Mesosに関する初めての論文投稿と発表が行われた。 その後、2011年のUsenix Symposium on Networked Systems Design and Implementationのカンファレンスにおいて、Zahariaによりより成熟したプロジェクトになっていることが発表された。このとき投稿された論文は、"Mesos: A Platform for Fine-Grained Resource Sharing in the Data Center" by Benjamin Hindman, Andy Konwinski, Zaharia, Ali Ghodsi（英語版）, Anthony D. Joseph, Randy Katz（英語版）, Scott Shenker（英語版）, Ion Stoica（英語版）である。 2016年7月27日、Apache Software Foundationはバージョン1の公開を発表した。このバージョンでは、Docker、rkt、appcのインスタンスを集中的に供給する機能が追加された。 MesosはLinuxのcgroupsを活用することで、CPU、メモリ、I/O、ファイルシステムの隔離（isolation）を実現している。 MesosはGoogleのサービスを管理・分散処理するためにGoogle内部でプライベートに使用されている、Borgスケジューラと比較できる。 Apache Aurora（英語版）は、長期間の実行サービスとcronジョブのためのMesosフレームワークである。Twitterが2010年に開発し、2013年後半にオープンソース化された。数万ノードのサーバーにスケールすることができ、サービスの設定にドメイン固有言語（DSL）を使用するなど、Borgとの類似点を多く持っている。 Chronosは、ジョブ間の依存関係を宣言できる、柔軟な分散cron-likeシステムである。 Marathonは、数千台の物理サーバーにスケールするplatform as a serviceまたはコンテナ（英語版）オーケストレーションシステムを促進するためのものである。完全なRESTベースのシステムであり、canary-styleのデプロイとデプロイ・トポトジを可能にする。プログラミング言語Scalaで書かれている。 ソーシャル・ネットワーキングサイトのTwitterは、HindmanがTwitterエンジニアのグループで発表した後の2010年から、MesosとApache Auroraを使用し始めた。 Airbnbは、2013年7月から、Apache HadoopやApache Sparkなどのデータ処理システムを実行するためにMesosを使用していると話している。 2014年4月、インターネットオークションサイトのeBayは、Mesosを継続的インテグレーションを開発者ごとに実行できるようにするために使用していると発表した。カスタムのMesosプラグインを使用することで、開発者自身がプライベートのJenkinsインスタンスを起動できるようになったと説明している。 2015年4月、Appleは、Siriが独自のMesos frameworkのJarvisを使用していることを発表した。 2015年8月、VerizonはデータセンターのサービスのオーケストレーションにMesosphereのDC/OSを選択したと発表した。 2015年11月、YelpはMesosとMarathonを1.5年間本番サービスで使用していることを発表した。 ソフトウェアスタートアップのMesosphere, Inc.（英語版）は、Apache Mesosに基づいた分散オペレーティングシステムであるDatacenter Operating System（英語版）を販売している。 2015年9月、Microsoftは、Mesosphereとの商業パートナーシップを結び、Microsoft Azure向けのコンテナスケジューラとコンテナオーケストレーションサービスを構築することを発表した。2015年10月、Oracleは、Oracle Container Cloud ServiceでのMesosに対するサポートを発表した。 ポータル FLOSS クラスタ管理システムの一覧（英語版） クラスタソフトウェアの比較（英語版） ^ “ASF Git Repos - mesos.git/commit”. 7 September 2019閲覧。 ^ Zaharia. “HUG Meetup August 2010: Mesos: A Flexible Cluster Resource manager - Part 1”. youtube.com. 13 January 2015閲覧。 ^ “A Common Substrate for Cluster Computing”. 2020年1月2日閲覧。 ^ Hindman, Benjamin; Konwinski, Andy; Zaharia, Matei; Ghodsi, Ali; Joseph, Anthony; Katz, Randy; Shenker, Scott; Stoica, Ion (2011). “Mesos: A Platform for Fine-Grained Resource Sharing in the Data Center” (PDF). NSDI 11: 22-22. http://people.csail.mit.edu/matei/papers/2011/nsdi_mesos.pdf 12 January 2015閲覧。.  ^ “The Apache Software Foundation Announces Apache Mesos v1.0”. Press release. (July 27, 2016). https://blogs.apache.org/foundation/entry/the_apache_software_foundation_announces97 February 24, 2017閲覧。  ^ “Mesos 1.0 brings a new container runtime and more third party integrations” (July 27, 2016). 2020年1月2日閲覧。 ^ Bappalige (2014年9月15日). “Open-Source Datacenter Computing with Apache Mesos”. OpenSource.com. Red Hat. 2016年12月10日閲覧。 ^ a b Metz. “Return of the Borg: How Twitter Rebuilt Google’s Secret Weapon”. wired.com. Wired. 12 January 2015閲覧。 ^ “Apache Aurora 0.21.0 Released”. 7 September 2019閲覧。 ^ “All about Apache Aurora”. Twitter. 20 May 2015閲覧。 ^ “Large-scale cluster management at Google with Borg” (PDF). Google. 20 May 2015閲覧。 ^ “Twitter's Aurora and How It Relates to Google's Borg”. 20 May 2015閲覧。 ^ “Chronos”. GitHub.com. GitHub. 30 March 2015閲覧。 ^ “Marathon”. Mesosphere.GitHub.io. Mesosphere (2014年). 30 March 2015閲覧。 ^ Harris. “Airbnb is engineering itself into a data-driven company”. gigaom.com. 12 January 2015閲覧。 ^ The eBay PAAS Team. “Delivering eBay’s CI Solution with Apache Mesos - Part I”. EbayTechBlog.com. eBay. 12 January 2015閲覧。 ^ Harris (2015年4月23日). “Apple Details How It Rebuilt Siri on Mesos”. Mesosphere.com. Mesosphere. 2015年4月29日時点のオリジナルよりアーカイブ。2015年4月27日閲覧。 ^ “Verizon selects Mesosphere DCOS as nationwide platform for data center service orchestration”. Verizon. 21 August 2015閲覧。 ^ “Introducing PaaSTA: An Open, Distributed, Platform as a Service”. engineeringblog.yelp.com. 2016年7月12日閲覧。 ^ “The Mesosphere DCOS”. mesosphere.com. 13 January 2015閲覧。 ^ Mary Jo Foley (September 29, 2015). “New Azure Container Service to bring together Mesos, Docker and Azure cloud”. ZDNet. 2019年1月2日閲覧。 ^ “Oracle Updates Oracle Cloud Infrastructure Services” (英語). oracle.com. 2018年2月6日閲覧。 公式ウェブサイト