【導讀】卡內基梅隆大學(CMU),在2020年春季學習繼續開設了由Eric P. Xing教授執教的經典課程《Probabilistic Graphical Models》(概率圖模型)。這門課程從2005年開設至今,已經有十多個年頭了。它影響了一代又一代計算機學者,為學界培養了大量機器學習人才。直到如今,概率圖模型仍然是機器學習領域非常火熱的方向,感興趣的同學不要錯過。
課程簡介:
在人工智能、統計學、計算機系統、計算機視覺、自然語言處理和計算生物學等許多其他領域中,許多問題都可以看作是從局部信息中尋找一致的全局結論。概率圖模型框架為這一范圍廣泛的問題提供了統一的視角,支持對具有大量屬性和龐大數據集的問題進行有效的推理、決策和學習。無論是應用圖模型來解決復雜問題還是作為將圖模型作為核心研究課題,本課程都能為你打下堅實基礎。
邢波 Eric P. Xing 教授
Eric P.Xing是卡內基梅隆大學(Carnegie Mellon University)計算機科學教授,是2018年世界經濟論壇(World Economic Forum)技術先驅公司Petuum Inc.的創始人、首席執行官和首席科學家,該公司為廣泛和通用的工業人工智能應用構建標準化人工智能開發平臺和操作系統。美國新澤西州立大學分子生物學與生物化學博士;美國加州大學伯克利分校(UC,Berkeley)計算機科學博士。主要研究興趣集中在機器學習和統計學習方法論及理論的發展,和大規模計算系統和架構的開發,以解決在復雜系統中的高維、多峰和動態的潛在世界中的自動化學習、推理以及決策問題。目前或曾經擔任《美國統計協會期刊》(JASA)、《應用統計年鑒》(AOAS)、《IEEE模式分析與機器智能學報》(PAMI)和《PLoS計算生物學雜志》(the PLoS JournalofComputational Biology)的副主編,《機器學習雜志》(MLJ)和《機器學習研究雜志》(JMLR)的執行主編,還是美國國防部高級研究計劃署(DARPA)信息科學與技術顧問組成員,曾獲得美國國家科學基金會(NSF)事業獎、Alfred P. Sloan學者獎、美國空軍青年學者獎以及IBM開放協作研究學者獎等,以及多次論文獎。曾于2014年擔任國際機器學習大會(ICML)主席。
課程信息:
摘要:
本文將優化描述為一個過程。在許多實際應用中,環境是如此復雜,以致于無法制定一個全面的理論模型,并使用經典算法理論和數學優化。采取一種穩健的方法是必要的,也是有益的,方法是應用一種不斷學習的優化方法,在觀察到問題的更多方面時從經驗中學習。這種將優化視為一個過程的觀點在各個領域都很突出,并在建模和系統方面取得了一些驚人的成功,現在它們已經成為我們日常生活的一部分。
作者介紹:
Elad Hazan是普林斯頓大學計算機科學教授。他于2015年從Technion畢業,當時他是該校運籌學副教授。他的研究重點是機器學習和優化的基本問題的算法設計和分析。他的貢獻包括合作開發用于訓練學習機器的AdaGrad算法,以及第一個用于凸優化的次線性時間算法。他曾(兩次)獲得2012年IBM Goldberg最佳論文獎,以表彰他對機器學習的次線性時間算法的貢獻。2008年,他還獲得了歐洲研究理事會(European Research Council)的一筆撥款、瑪麗?居里(Marie Curie)獎學金和谷歌研究獎(兩次)。他是計算學習協會的指導委員會成員,并擔任COLT 2015的項目主席。
課程名稱: CS224W: Machine Learning with Graphs
課程簡介:
網絡是對復雜的社會、技術和生物系統建模的基本工具。結合在線社交網絡的出現和生物科學中大規模數據的可用性,本課程重點分析提供了幾個計算、算法和建模挑戰的大規模網絡。學生將學習機器學習技術和數據挖掘工具,通過研究其潛在的網絡結構和相互聯系,揭示對社會、技術和自然世界的洞察。
在本課程中,我們將介紹圖機器學習技術,包括以下主題:
課程部分大綱:
講師介紹:
Jurij Leskovec是斯坦福大學計算機科學副教授,研究側重于分析和建模大型社區和信息網絡,作為跨社區、技術和自然世界現象的研究。他側重于網絡結構的統計建模、網絡演化、信息傳播、網絡影響和病毒。他所研究的問題是由大規模數據、網絡和其他在線媒體引發的,同樣從事文本挖掘和機器學習的應用。個人官網:
下載索引:鏈接:
課程簡介
Geoffrey Hinton《神經網絡機器學習》經典課程共有16節,基本涵蓋了神經網絡相關的各個知識點,包括神經網絡、神經元模型、感知機、反向傳播算法等,雖然課程中有些算法已經過時,但其中的理論基礎仍然在為今天的各類主流算法提供著可靠的支持,對于算法研究者來說,有助于加深對這一領域的理解,并對未來的研究方向起到一定的借鑒意義。
課程講師:Geoffrey Hinton
講師簡介
Geoffrey Hinton,被稱為“神經網絡之父”、“深度學習鼻祖”,他曾獲得愛丁堡大學人工智能的博士學位,并且為多倫多大學的特聘教授。在2012年,Hinton還獲得了加拿大基廉獎(Killam Prizes,有“加拿大諾貝爾獎”之稱的國家最高科學獎)。2013年,Hinton 加入谷歌并帶領一個AI團隊,他將神經網絡帶入到研究與應用的熱潮,將“深度學習”從邊緣課題變成了谷歌等互聯網巨頭仰賴的核心技術,并將反向傳播算法應用到神經網絡與深度學習。
個人主頁:
Geoffrey Hinton://www.cs.toronto.edu/~hinton/
課程介紹
在人工智能、統計學、計算機系統、計算機視覺、自然語言處理和計算生物學等許多領域中的問題,都可以被視為從局部信息中尋找一致的全局結論。概率圖模型框架為這些普遍問題提供了統一的視角解決方案,支持在具有大量屬性和龐大數據集的問題中進行有效的推理、決策和學習。本研究生課程將為您運用圖模型到復雜的問題和解決圖模型的核心研究課題提供堅實的基礎。
課程大綱
講師:邢波
講師簡介
邢波,卡耐基梅隆大學教授,曾于2014年擔任國際機器學習大會(ICML)主席。主要研究興趣集中在機器學習和統計學習方法論及理論的發展,和大規模計算系統和架構的開發。他創辦了Petuum 公司,這是一家專注于人工智能和機器學習的解決方案研發的公司,騰訊曾投資了這家公司。
個人主頁:
普林斯頓大學在19年春季學期,開設了COS 598D《機器學習優化》課程,課程主要介紹機器學習中出現的優化問題,以及解決這些問題的有效算法。前不久,課程教授Elad Hazan將其精心準備的課程講義開放了出來,講義內容詳實循序漸進,非常適合想要入門機器學習的同學閱讀。
COS 598D:Optimization for Machine Learning(機器學習優化)是普林斯頓大學在19年春季學期開設的課程。課程主要介紹機器學習中出現的優化問題,以及解決這些問題的有效算法。