サミー・ベンジオ

サミー・ベンジオは、カナダのコンピュータ科学者で、2021年5月よりAppleのAI・機械学習研究部門のシニアディレクターである。元Googleの科学者として、敵対的生成ネットワークを含む機械学習の研究者グループを率いてきたことで知られている。ベンジオがGoogleを辞任したのは、彼が担当していた組織内の2人の女性リーダー、ティムニット・ゲブルとマーガレット・ミッチェルをGoogleが予告なしに解雇した直後だった。ベンジオは当時、ゲブルの解雇には「唖然とした」と語っていた。AppleではGoogleでも元上司だったジョン・ジャナンドレア上級副社長の下で職に就く。ベンジオは、現在の2大機械学習フレームワークの1つであるPyTorchの祖先のTorchを2002年に開発した3人のエンジニアのひとりでもある。 ベンジオは、1993年にモントリオール大学でOptimization of a Parametric Learning Rule for Neural Networksという論文でコンピュータサイエンスの博士号を取得した。それ以前に、ベンジオは1989年に同大学にてIntegration of Traditional and Intelligence Tutoring Systemsという論文でコンピュータサイエンスの修士号を、1986年にコンピュータサイエンスの学士号を取得している。 DBLPによると、サミー・ベンジオは、ニューラルネットワーク、機械学習、深層学習、統計、コンピュータビジョン、自然言語処理に関する約250の科学論文を執筆している。その中でも、2010年代の深層学習革命のきっかけとなった、深層学習によって得られた多くの学習表現を探索する方法を示した初期の論文や、画像キャプションに対する最初の深層学習アプローチの一つや、深層学習がなぜ機能するのかを理解するための努力など、多くの後続論文がある。また、敵対的な例が実世界に存在することを初めて証明した。つまり、機械学習システムが騙されるような物理的な物体の変更が実際に可能であることや 、ゼロショット認識（学習中に見たことのないクラスを認識すること）に関する最初の研究の1つを手がけたのである。 ベンジオは、1999年から2007年まで、スイスのIDIAP研究所とエコールポリテクニックフェデラルデローザンヌで働いていた。 彼は2018年にNeuralInformation Processing Systems （NeurIPS）会議の議長を 、2017年にはNeurIPSのプログラム委員長を務め 、その後は理事を務めていた。彼はまた、ICLR（2015-2016） プログラム委員長であり、その理事会（2018-2020）に在籍していた。 ベンジオは、Journal of Machine LearningResearchの編集者でもある。 サミー・ベンジオは、フランスとカナダに移住した2人のモロッコ系ユダヤ人として生まれた。彼はチューリング賞を受賞したヨシュア・ベンジオの弟である。彼らは2人とも、モロッコでの父親の兵役中に1年間モロッコに住んでいた。彼の父、カルロ・ベンジオは、劇場作品を書き、ユダヤ・アラビア語の作品を演奏するセファルディム劇団をモントリオールで運営した薬剤師だった。彼の母親、セリア・モレノは、1970年代にタイブ・セディキによって運営されたモロッコの主要な劇場シーンの1つで演じたアーティストでもある。 ^ “Apple hires ex-Google AI scientist who resigned after colleagues' firings” (英語). Reuters (2021年5月3日). 2021年5月21日閲覧。 ^ “Another prominent Google scientist is leaving the company amid fallout from fired AI researcher” (英語). CNBC. 2021年4月9日閲覧。 ^ Dave, Jeffrey Dastin, Paresh (2020年12月17日). “Google staff demand exec step aside after ethicist's firing - document” (英語). Reuters. https://www.reuters.com/article/us-alphabet-google-research-idUSKBN28R0F0 2021年6月11日閲覧。  ^ Schiffer (2021年4月6日). “Google AI manager resigns following controversial firings of two top researchers” (英語). The Verge. 2021年6月11日閲覧。 ^ “Samy Bengio” (英語). www.facebook.com. 2021年6月11日閲覧。 ^ “Apple hires ex-Google AI scientist who resigned after colleagues' firings”. Reuters (2021年5月3日). 2021年6月15日閲覧。 ^ Collobert, Ronan; Bengio, Samy; Marithoz, Johnny (2002). Torch: A Modular Machine Learning Software Library. https://citeseerx.ist.psu.edu/viewdoc/summary?doi=10.1.1.8.9850  ^ Yegulalp (2017年1月19日). “Facebook brings GPU-powered machine learning to Python” (英語). InfoWorld. 2021年2月23日閲覧。 ^ “The State of Machine Learning Frameworks in 2019” (英語). The Gradient (2019年10月10日). 2021年2月23日閲覧。 ^ “dblp: Samy Bengio” (英語). dblp.org. 2021年2月24日閲覧。 ^ “Samy Bengio”. scholar.google.com. 2021年2月24日閲覧。 ^ Erhan, Dumitru; Bengio, Yoshua; Courville, Aaron; Manzagol, Pierre-Antoine; Vincent, Pascal; Bengio, Samy (2010-03-01). “Why Does Unsupervised Pre-training Help Deep Learning?”. The Journal of Machine Learning Research 11: 625–660. ISSN 1532-4435. https://dl.acm.org/doi/10.5555/1756006.1756025.  ^ Vinyals, Oriol; Toshev, Alexander; Bengio, Samy; Erhan, Dumitru (June 2015). “Show and tell: A neural image caption generator”. 2015 IEEE Conference on Computer Vision and Pattern Recognition (CVPR) (IEEE): 3156–3164. arXiv:1411.4555. doi:10.1109/cvpr.2015.7298935. ISBN 978-1-4673-6964-0. https://doi.org/10.1109/cvpr.2015.7298935.  ^ Zhang, Chiyuan; Bengio, Samy; Hardt, Moritz; Recht, Benjamin; Vinyals, Oriol (March 2021). “Understanding deep learning (still) requires rethinking generalization”. Communications of the ACM 64 (3): 107–115. doi:10.1145/3446776. ISSN 0001-0782. https://doi.org/10.1145/3446776.  ^ “Google Scholar”. scholar.google.com. 2021年2月24日閲覧。 ^ Kurakin, Alexey; Goodfellow, Ian J.; Bengio, Samy (2018-07-27), “Adversarial Examples in the Physical World”, Artificial Intelligence Safety and Security (First edition. | Boca Raton, FL : CRC Press/Taylor & Francis Group, 2018.: Chapman and Hall/CRC): 99–112, arXiv:1607.02533, doi:10.1201/9781351251389-8, ISBN 978-1-351-25138-9, https://doi.org/10.1201/9781351251389-8 2021年2月24日閲覧。  ^ Frome, Andrea; Corrado, Greg S.; Shlens, Jonathon; Bengio, Samy; Dean, Jeffrey; Ranzato, Marc'Aurelio; Mikolov, Tomas (2013-12-05). “DeViSE: a deep visual-semantic embedding model”. Proceedings of the 26th International Conference on Neural Information Processing Systems - Volume 2 (Lake Tahoe, Nevada: Curran Associates Inc.): 2121–2129. https://dl.acm.org/doi/10.5555/2999792.2999849.  ^ (フランス語) Samy Bengio: de l'IDIAP à Google. (2008-04-11). https://actu.epfl.ch/news/samy-bengio-de-l-idiap-a-google/.  ^ “2018 Organizing Committee”. nips.cc. 2021年2月23日閲覧。 ^ “NIPS 2017 Committees”. nips.cc. 2021年2月23日閲覧。 ^ “Board, Neural Information Processing Systems”. nips.cc. 2021年2月23日閲覧。 ^ “ICLR 2015 -”. iclr.cc. 2021年2月24日閲覧。 ^ “2020 Board”. iclr.cc. 2021年2月24日閲覧。 ^ “Samy Bengio | Simons Institute for the Theory of Computing”. simons.berkeley.edu. 2021年2月23日閲覧。 ^ “Interview: The Bengio Brothers” (英語). Eye On AI. 2021年2月24日閲覧。 ^ Levy (2019年5月8日). “À la mémoire de Carlo Bengio” (英語). The Canadian Jewish News. 2021年2月24日閲覧。 ^ “Célia Moréno, une marocaine au Québec” (フランス語). Mazagan24 - Portail d'El Jadida (2020年11月14日). 2021年2月24日閲覧。