一🖕🏻🧏🏿‍♂️、課程簡介

深度學習是機器學習領域中一個新的研究方向，其目標是建立模擬人腦進行分析學習的神經網絡，並通過這套機製識別與解釋文字、圖像和聲音等數據，從而使人工智能變為可能。本項目是英國劍橋大學設計的線上遠程教學項目，旨在為學生創造世界頂級大學的學習體驗機會，提升學生在深度學習前沿領域的研究技能，掌握軟件編寫技巧，並且了解該領域與其它領域之間的關聯與發展潛力。

課程特色：

1.原汁原味的劍橋課程🐊。由劍橋大學計算機科學教授親自參與設計與授課，確保課程專業性與品質；

2.實時授課，註重互動。課程全部為劍橋老師的真人實時直播授課，非錄播形式，保證與學生的互動效果；

3.四六級可申請。無需托福雅思成績🧍‍♀️，用大學英語四/六級即可入讀劍橋課程；

4.成績單與學習證明。可獲得劍橋大學頒發的成績單與項目證書🦷，為個人履歷添磚加瓦。

課程內容：

劍橋大學格頓學院的暑期在線深度強化學習項目有以下主要特點🃏🛁：

1.項目為期三周♦︎，包含總共20個實時直播課時，多數課程預計會安排在北京時間下午至晚間進行（實際授課時間以校方最終安排為準）🙅🏿‍♂️；

2.授課形式包括系列專題講座+實踐（總共10場，每場各2小時）；

3.學生均會註冊成為劍橋大學格頓學院的學生🏌🏼，並且獲權使用劍橋大學的教學管理平臺Moodle。劍橋老師通過ZOOM平臺在線授課🧑🏽‍🍼，課前閱讀以及作業布置則會通過Moodle安排。

課程將探討深度強化學習的最新潛力🙇🏼‍♀️，側重於強化學習和深度學習的基礎知識（包括卷積神經網絡、圖形神經網絡、生成神經網絡和Transformer模型），並將分享機器人和遊戲中的實例，從而加強學生對深度學習核心理念的了解，提升相關的研究技能與實用技巧。

以下為計劃的課程內容（以實際安排為準）✮：

7.25日周一

講座內容：強化學習導論主題🧏🏿。強化學習的算法和框架；遺傳算法，帕累托前沿；強化學習與深度學習的聯系（Transformers模型、圖形神經網絡）🙆🏿；強化學習案例分析；如何撰寫相關文章。

實踐內容：科學計算工具簡介主題🦤；Jupyter Notebook的基本使用以及LaTeX🗂🫂；強化學習框架中的基本組件🧑🏿‍🚀；小組項目說明。

7.27日周三

講座內容💆🏽‍♀️🟣：環境主題。環境復雜性建模；多智能體強化學習（MARL）；Q-Learning以及Actor-Critic模型🦷；基於政策的學習🧑‍🧒‍🧒；馬爾可夫決策過程、動態編程和貝爾曼方程；強化學習與深度學習的聯系。

實踐內容✒️：環境主題；強化學習框架中的基本組件；；馬爾可夫決策過程；OpenAI Gym簡介小組項目說明♔1️⃣。

7.29日周五

講座內容：優化主題。強化學習與控製優化；深度Q網絡；強化學習與深度學習的聯系；強化學習案例；Transformers模型和圖像分析集成。

實踐內容：Pytork簡介；備份圖；使用馬爾可夫決策過程進行優化（動態編程、貝爾曼方程😈、策略迭代、值迭代）；項目進展匯報。

8.2日周二

講座內容：集成與控製主題。機器人與貢獻度分配問題；冗余度機器人的自適應運動控製；多智能體強化學習與機器人😒；強化學習與其他深度學習技巧的整合。

實踐內容🛻：無模型算法主題。基於價值的算法（蒙特卡羅☁️、時間差分學習、SARSA🙆🏽‍♀️、Q-learning、DQN及其變體）；項目進展匯報。

8.3日周三

講座內容：集成主題🥹。與圖形神經網絡的集成🩲；關註和信息傳遞模型⚔️；與AUTO-ML和ML系統的集成👩🏽‍🍳👰🏼‍♂️。

實踐內容：無模型算法主題🐈。基於策略的算法（策略梯度、增強）；Actor-Critic算法；項目進展匯報。

8.4日周四

講座內容：圖神經網絡（GNN）與強化學習主題。圖示學習與強化學習的關聯。

實踐內容🎅🏽：圖神經網絡練習🏋️‍♀️，項目進展匯報。

8.5日周五

講座內容：監管圖神經網絡主題𓀌。圖神經網絡與遊戲的理論與運用。

實踐內容🟨：圖神經網絡練習主題。DGL, Spektral, Pytorch；項目進展匯報。

8.8日周一

講座內容🦴🥡：無監管圖神經網絡主題🤹🏼。圖神經網絡與機器人⇾🤦🏿‍♀️。

實踐內容：圖神經網絡練習主題。DGL, Spektral, Geometric Pytorch；項目進展匯報。

8.9日周二

講座內容👨🏼‍⚕️：圖神經網絡（GNN）與強化學習：高級建模。

實踐內容：項目進展匯報。

8.12日周五

項目回顧與總結；小組項目成果陳述。

二🚵🏼‍♀️、課程時間

2022年7月25日-8月12日（3周）

三⭕️、課程費用

約合人民幣12060元,費用包括項目服務費🛡♞，學雜費

四、項目申請

項目名額🔽：20名

項目申請截止日期：

2022年6月24日

選拔要求👩‍👧‍👦：

1.僅限本校全日製在校生🐬，本科和研究生均可申請；成績優異、道德品質好👌🏿，在校期間未受過紀律處分✌🏽，身心健康🦈，能順利完成在線學習任務🧛🏼‍♀️；

2.英語要求：具備優秀的英語基礎，達到大學英語四級500分，或大學英語六級470分🐪，或托福79，或雅思6.0🧴，或Duolingo105🥊；

3.家庭具有一定經濟基礎🦽✌🏽，能夠提供訪學所需費用；

4.通過項目面試🥏、學術審核以及熊猫体育的資格審核

申請方式與報名流程：

第一步：項目咨詢和申請，並填寫報名表，鏈接如下：

https://k8mm1amta1700adb471ba12b.cloudcc.com/customize/page/6392e0939/ce.jsp?name=ce， 通過外方院校審核

第二步👨🏼‍🦳：拿到對方的錄取函後在校內備案

研究生請前往http://gs.dhu.edu.cn/9622/list.htm下載表格，填好之後提供學院同意的截圖🤶🏿，將電子表格和同意的截圖發到研究生部郵箱：wulianchao@dhu.edu.cn👷🏽‍♀️，並抄送國際合作處張老師的郵箱💁🏿：snow@dhu.edu.cn。若填寫中有疑問🔣，請咨詢研究生部吳老師67792427。

本科生請在熊猫体育官网新教務系統的校外交流申請欄目中填寫並提交申請。若填寫中有疑問，請咨詢教務處杜老師，電話：67792064；郵箱🎓：10015641@dhu.edu.cn。同時將已提交的截圖發送至張老師的郵箱🍋：snow@dhu.edu.cn💃🏼。

五、項目咨詢

國際合作處：張老師snow@dhu.edu.cn

項目執行：楊老師 15225360163（微信同號）

國際合作處

2022年6月10日