【生成式AI導論 2024】第9講：以大型語言模型打造的AI Agent (

投影片連結：drive.google.com/file/d/1aW1c...
3:20 根據之前上課的內容
• 【生成式AI導論 2024】第3講：訓練不了...
• 【生成式AI導論 2024】第4講：訓練不了...
• 【生成式AI導論 2024】第5講：訓練不了...
想想看語言模型能不能做到投影片上原來由人來進行的行動呢
3:30 前為上課後重錄的內容
14:30 我的ChatGPT現在有 Memory 了 (2024/04/26)
17:40 此處用的是 GPT-4
下週 (4/26) 中央大學蔡宗翰老師來課堂上講 TAIDE 開發過程，所以下週沒有更新
延伸閱讀：
The Rise and Potential of Large Language Model Based Agents: A Survey
arxiv.org/abs/2309.07864

[@hwhsu2234]

把課程名稱改成「芙莉蓮教你生成式AI」，再用語言模型訓練一個「懂得所有AI知識的芙莉蓮」當助教，感覺會紅

[@atomhero2830]

Freaking love your lecture and your reference to Frieren. Will watch all of your videos, will give you more than a "like" if I can.

[@iwmlo1221]

= = 老師在國外還如此敬業 一定看爆！

[@KYChang0220]

老師連芙莉蓮的部分都講的超精彩 笑死

[@manyes7577]

到底哪個都動畫啊 沒看過

[@user-bp1pn9lr1q]

本來要去睡覺 結果看到新影片

[@MengHuaHung]

剛好想了解這塊領域耶，謝謝老師更新

[@susuky3832]

# 大型語言模型未來的趨勢：打造AI Agent ## 主題概要 - **AI Agent的定義**：能執行多步驟複雜任務的AI，能做計畫並能修改計畫。 - **現況與挑戰**：目前AI多為單一步驟操作，如翻譯、畫圖等。對於需要多步驟的複雜任務，如舉辦聚餐，AI的應用仍有限。 - **未來展望**：未來AI Agent將能自主與環境互動，解決複雜問題，成為日常生活的一部分。 ## LLM與AI Agent - LLM提供AI Agent強大的處理能力 - 透過模型能力，AI Agent能在未來更廣泛地被應用於日常生活中 ## AI Agent的應用實例 - **AutoGPT**：能自主搜尋資訊、使用工具、完成任務的AI Agent。 - **Stanford小鎮與Minecraft**：AI在虛擬世界中自主探索、學習新任務。 - **機器人與自駕車**：透過語言模型操控，執行具體動作或任務。 ## AI Agent運作原理 - **終極目標**：AI Agent欲達成的任務 - **記憶**：過去與環境互動的經驗 - **感知**：透過感官了解外界狀態 - **計畫**：根據目標、記憶、狀態產生的短期目標和行動方案 - **行動**：根據計畫進行的具體操作 - **學習與適應**：根據環境變化調整計畫和記憶 ## 記憶力的重要性 - **短期與長期記憶**：大型語言模型如GPT具有一定程度的記憶能力，但長期記憶的實現仍在研究中。 - **記憶與個性化**：具備記憶能力的AI能更加個人化，提供針對性的回應和幫助。 ## 例子：**芙莉蓮一級魔法使考試中出現的泥人哥列姆** - **哥列姆**：一種啟動後能自主行動保護使用者的Agent。 - **運作過程**：從識別環境狀態、制定計畫到執行具體動作，展示了AI Agent的潛力。 ## 結論與展望 - AI Agent的發展將使AI能處理更複雜、多步驟的任務，未來一兩年內將逐漸成為現實。 - 記憶能力的進一步提升將使AI Agent能更好地學習與適應，提供更加個性化的服務。

[@user-zt2mq8jd4y]

寫太好了，看完你寫的筆記，都覺得自己寫的好爛

[@user-in3qm8wc5s]

@@user-zt2mq8jd4y 哈哈哈哈笑死我也是

[@danpoo007]

感謝老師，早上可以配早餐吃了

[@tom199520000]

內容生動有趣！❤

[@user-gh2bl7ly4y]

感謝老師的分享❤

[@paxetin]

我都來老師這邊補番

[@hankdonald7812]

0:14 AI agent 定义，能够自主制定计划并调整计划，以便完成多步骤复杂任务的AI 5:04 AI agent 案例1-Stanford小镇 5:28 AI agent 案例2-会自己玩Minecraft 6:29 AI agent 案例3-操控机器人 8:24 AI agent 案例4-开自驾车 9:22 AI agent 运作的可能原理（关键是这个AI agent要有长期记忆能力和自主制定短期计划的能力） 12:19 目前chatGPT是没有长期记忆的，它的记忆只局限于同一个session当中，并不能跨对话保存记忆。但chatGPT正在开发跨session记忆这一能力。 14:41 用动画片解释说明AI agent（芙莉莲哥列姆什么什么的，完全看不懂这段，直接跳过） 24:23 结束

[@cathy9299]

這些Agent細思考都可以做… Agent對Agent,提供好的tools並且描述正確，接著就比機器手臂，算力，能量，散熱等等。

[@jhengllab]

愛老師😍

[@asfesef]

AI 最後一定會反思出人類才是危害

[@user-xe1sn6qc8c]

老师，GPT memory可用了，我能使用这个功能了。当聊天过程中，会产生一些memory，memory被集中管理在一个地方，可以删除部分memory。这些memory是cross chats的！

[@user-xe1sn6qc8c]

“Memory ChatGPT will become more helpful as you chat, picking up on details and preferences to tailor its responses to you. Learn more To understand what ChatGPT remembers or teach it something new, just chat with it: “Remember that I like concise responses.” “I just got a puppy!” “What do you remember about me?” “Where did we leave off on my last project?” ”

[@user-xe1sn6qc8c]

示例： User Remember that I like concise responses ChatGPT Memory updated Got it! I'll keep it concise.

[@Terry0319]

謝謝老師

[@mengyuge3369]

大爱李老师！！！

[@huang4332]

用福利連聯想到AI XDDDDD 老師超讚!!!!!!

[@yongshangli8104]

敬业的老师

[@elvis1322]

準時簽到上課

[@willy7703]

一直想問老師(雖然這可能超過您的職責範疇) TAIDE 的開發過程 是否會公開在NTU演講網或YT呢@@??

[@coder2018]

老师辛苦了

[@user-qj8do3sh9g]

感谢老师的分享，真的太棒了，请问老师如果想自己尝试做SFT和RLHF的作业的话，需要去哪里找呢？

[@xaviertsai4063]

上課啦🎉

[@LiLi-rm8oj]

最近才在想鋼鐵人的Jarvis什麼時候會實現

[@user-qn9yf7ds7v]

之前的課程有介紹過RAG嗎?

[@Ethan_here230]

Can u please provide the english subtitles for all your Chinese videos?

[@user-mv9ul9tz1c]

想請問目前一般chatgpt 同一個channel的上下文記憶力有多好啊? 我之前有在同一個channel上陸續問幾則問題，最後再請它想想從一開始到目前為止我總共問他幾個問題，不過他好想會亂猜，或是蒙對數字，但是我故意質疑一下又修改掉正確答案

[@user-uq9rf6hh3p]

老師能否把作業放到YT上面呢，因為老師講的概念都非常有趣，讓人很想實際操作相關的東西，卻又不知如何下手

[@user-vn3mt3xe3k]

老师的课程主页里有作业链接~

[@yy-iw1cf]

@@user-vn3mt3xe3k 还是没找到，课程主页在哪那？是在视频页吗

[@user-mj8hi5so6k]

请问这一系列课程总共有多少节呀？

[@spes9850401]

13:15 今天ChatGPT剛好推出有跨分頁記憶的AI

[@founder-13th]

現在我會使用AI agent了，那麼我可以成為一級魔法使了嗎。

[@zy5522]

一跳通知就馬上來看芙莉蓮~~

[@hankslin3326]

24:23 我只能大喊一聲 握草 原批

[@mingli7172]

我五體投地😂

[@patricksu9762]

Ai agent 應該即將出現 Apple OpenAi感覺都磨刀霍霍要推出個人智能助理 這個助理總該解決問題了吧 SIRI真的笨的有剩好多年了⋯⋯

[@laiyenju]

好想要一隻哥列姆

[@princend1584]

泥人哥列姆 簡稱

[@lemon94]

ReActAgent 感觉也不咋好用

[@bhanukumarkotha4270]

Please teach in English 😢