免费手机在线观看不卡A片视频_日本十八禁视频无遮挡_好吊色欧美一区二区三区四区_韩国18禁电影已婚的女人_久久久久久精品免费看_欧美在线视频免费观看_经典三级线在线观看_他添的我好湿好爽视频_日产久久视频

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

大模型在想什么?因果學(xué)習(xí)與模型可解釋性入門丨面向復(fù)雜系統(tǒng)的人工智能第十一講

0
分享至


導(dǎo)語

集智俱樂部、集智學(xué)園創(chuàng)始人,北京師范大學(xué)張江教授開設(shè)了,致力于打破學(xué)科壁壘,將復(fù)雜系統(tǒng)與人工智能深度融合。從神經(jīng)網(wǎng)絡(luò)到因果推斷,從世界模型到多尺度建模,甚至包含最前沿的“氛圍編程(Vibe Coding)”實戰(zhàn),帶你親手落地AI項目。

作為系列課程的第十一講,張江教授將以「因果學(xué)習(xí)與模型可解釋性」為題,在因果學(xué)習(xí)部分,教你用算法從數(shù)據(jù)中自動還原因果圖,并從高維觀測中提取因果變量;在可解釋性部分,解剖大模型,追蹤內(nèi)部信息流,甚至可以用數(shù)學(xué)方法植入或抹除它的某個特定想法。正式分享將于5月25日(周一)13:30-16:15騰訊會議線上直播,北師大海淀區(qū)線下授課(助教可協(xié)助入校)。

課程簡介

Anthropic 分析 Claude 內(nèi)部推理時使用的電路追蹤框架,可以溯源到本節(jié)課程講解的內(nèi)容:因果學(xué)習(xí)與模型可解釋性。

課程分兩部分推進。第一部分建立因果機器學(xué)習(xí)理論基礎(chǔ):從Pearl因果層級(關(guān)聯(lián)→干預(yù)→反事實)與結(jié)構(gòu)因果模型(SCM)出發(fā),引入獨立因果機制原則和稀疏機制偏移假設(shè),推導(dǎo)PC算法從條件獨立性測試中恢復(fù)因果圖的完整流程;進而講解因果表征學(xué)習(xí),涵蓋線性ICA可辨識性理論、時間對比學(xué)習(xí)(TCL)對非線性ICA的突破、以及iVAE將可辨識性引入變分自編碼器;最后以不變因果預(yù)測(ICP)與穩(wěn)定學(xué)習(xí)作為落地應(yīng)用。第二部分聚焦大語言模型可解釋性:從Transformer電路框架出發(fā),介紹電路追蹤與歸因圖;再到表示工程;最后覆蓋SelfIE與Patchscopes等自解釋框架。

學(xué)完本節(jié)內(nèi)容,你可以獨立運行PC算法、理解ICA類因果表征方法的可辨識性條件,并掌握用LAT干預(yù)語言模型內(nèi)部狀態(tài)的實操路徑。

課程大綱

  1. Causal Learning

    1. Causal Machine Learning: Background and Principles

    2. Causal Discovery

    3. Causal Representation Learning

  2. Model Interpretability


關(guān)鍵術(shù)語

  • 結(jié)構(gòu)因果模型(SCM):將數(shù)據(jù)生成過程形式化為帶外生噪聲的方程組,支持干預(yù)與反事實推理

  • d-分離:DAG中判斷兩變量在給定條件集下條件獨立的圖形化準則

  • Markov等價類:產(chǎn)生相同條件獨立關(guān)系的一組DAG,PC算法僅能恢復(fù)到此級別

  • 獨立因果機制(ICM)原則:不同因果變量的生成機制相互獨立,局部干預(yù)不影響其余機制

  • 時間對比學(xué)習(xí)(TCL):利用時間分段信息解決非線性ICA可辨識性問題的方法

  • iVAE:通過輔助觀測變量(如時間或領(lǐng)域標(biāo)簽)使VAE潛變量滿足可辨識性條件

  • 殘差流:Transformer中信息在各層間傳遞的主干,所有組件以并行加法讀寫同一向量

  • 表示工程(RepE):通過讀取和控制模型內(nèi)部表示空間來干預(yù)模型行為,無需修改權(quán)重

  • 線性人工層析成像(LAT):對比正負刺激激活差異提取概念方向向量,用于行為監(jiān)控與控制


課程信息

課程主題:因果學(xué)習(xí)與模型可解釋性

課程時間:2026年5月25日(周一) 13:30-16:15

課程形式:騰訊會議(會議信息見群內(nèi)通知)/北師大海淀區(qū)線下授課(助教可協(xié)助入校);集智學(xué)園網(wǎng)站錄播(3個工作日內(nèi)上線)

課程主講人

張江,北京師范大學(xué)系統(tǒng)科學(xué)學(xué)院教授,集智俱樂部、集智學(xué)園創(chuàng)始人,集智科學(xué)研究中心理事長,曾任騰訊研究院、華為戰(zhàn)略研究院等特聘顧問。主要研究領(lǐng)域包括因果涌現(xiàn)、復(fù)雜系統(tǒng)分析與建模、規(guī)模理論等。

個人主頁:https://jake.swarma.org/

課程適用對象

  1. 理工科背景高年級本科生

  2. 理工科背景碩士、博士研究生


報名須知

1. 課程形式:

  1. 參與方式:付費學(xué)員可參與騰訊會議直播/北師大海淀區(qū)線下授課(助教可協(xié)助入校)

  2. 授課形式:

  1. 平時:課堂討論與內(nèi)容共創(chuàng)

  2. 結(jié)課:項目匯報

2. 課程周期:2026年3月2日-2026年6月22日,每周一 13:30-16:15進行。

3. 課程定價:399元

課程鏈接:https://campus.swarma.org/v3/course/5684?from=wechat

付費流程:

  1. 課程頁面添加學(xué)員登記表,添加助教微信入群;

  2. 課程可開發(fā)票。

課程共創(chuàng)任務(wù):課程字幕

為鼓勵學(xué)員深度參與、積極探索,我們致力于形成系列化知識傳播成果,并構(gòu)建課程知識共建社群。為此,我們特別設(shè)立激勵機制,讓您的學(xué)習(xí)之旅滿載收獲與成就感。

課程以老師講授為主,每期結(jié)束后,助教會于課程群內(nèi)發(fā)布字幕共創(chuàng)任務(wù)。學(xué)員通過參與這些任務(wù),不僅能加深對內(nèi)容的理解,還可獲得積分獎勵。積分可兌換其他讀書會課程或?qū)嵨铼勂罚δ某掷m(xù)成長。

推薦課程

參考課程

  1. 吳恩達:Build with Andrew https://www.deeplearning.ai/courses/build-with-andrew/

  2. Jure Leskovec: Machine Learning with Graphs, StanfordCS224W.https://www.youtube.com/playlist?list=PLoROMvodv4rPLKxIpqhjhPgdQy7imNkDn

  3. Steve Brunton: Data Driven Science and Engineering, University of Washingtonhttps://www.youtube.com/playlist?list=PLMrJAkhIeNNRpsRhXTMt8uJdIGz9-X_1-

  4. Karthik Duraisamy: DATA-DRIVEN ANALYSIS AND MODELING OF COMPLEX SYSTEMS, Michigen institute for computational discovery and engineering, Michigen University.https://micde.umich.edu/academic-programs-old/data-driven-course/

  5. Sergey Levine: Deep Reinforcement Learning, CS 285 at UC Berkeley.http://rail.eecs.berkeley.edu/deeprlcourse/

【集智學(xué)園網(wǎng)站資源】

  1. 對復(fù)雜系統(tǒng)連續(xù)變化自動建?!狽eural Ordinary Differential Equations解讀https://campus.swarma.org/course/2046

  2. 復(fù)雜網(wǎng)絡(luò)自動建模在大氣污染中的應(yīng)用https://campus.swarma.org/course/1998

  3. 兩套因果框架深度剖析:潛在結(jié)果模型與結(jié)構(gòu)因果模型https://campus.swarma.org/course/2526

  4. 穩(wěn)定學(xué)習(xí):發(fā)掘因果推理和機器學(xué)習(xí)的共同基礎(chǔ)https://campus.swarma.org/course/2323

  5. 因果強化學(xué)習(xí)https://campus.swarma.org/course/2156

  6. 張江:因果與機器學(xué)習(xí)能夠破解涌現(xiàn)之謎嗎https://campus.swarma.org/course/4540

  7. 因果涌現(xiàn)理論提出者:Erik Hoel主題報告https://campus.swarma.org/course/4317

  8. 如何從數(shù)據(jù)中發(fā)現(xiàn)因果涌現(xiàn)——神經(jīng)信息壓縮器https://campus.swarma.org/course/4874

  9. 標(biāo)準化流技術(shù)簡介https://campus.swarma.org/course/1999

  10. 帶隱狀態(tài)的強化學(xué)習(xí)世界模型https://campus.swarma.org/course/4848

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點推薦
社保大局已定?今明兩年,靈活就業(yè)或斷繳過社保的人,認準3不做

社保大局已定?今明兩年,靈活就業(yè)或斷繳過社保的人,認準3不做

臨云史策
2026-06-19 14:45:36
才知道!菜市場和超市的豬肉差這么多,看完再也不用糾結(jié)去哪買了

才知道!菜市場和超市的豬肉差這么多,看完再也不用糾結(jié)去哪買了

阿萊美食匯
2026-06-18 16:59:08
五一回婆家給了婆婆1500,走時她給我女兒個紅包,半路拆開后哭了

五一回婆家給了婆婆1500,走時她給我女兒個紅包,半路拆開后哭了

大熊歡樂坊
2026-06-20 03:14:58
“電網(wǎng)憑啥不要我兒子?”母親淚訴:華北電力坑人!630分白考了

“電網(wǎng)憑啥不要我兒子?”母親淚訴:華北電力坑人!630分白考了

復(fù)轉(zhuǎn)這些年
2026-06-19 19:03:30
騎士奪冠整整10周年!ESPN曬15人去向:他們都沒離開籃球

騎士奪冠整整10周年!ESPN曬15人去向:他們都沒離開籃球

羅說NBA
2026-06-20 06:49:36
53歲王姐豐滿漂亮,相親當(dāng)天同居,第二天起床后:我還是太年輕

53歲王姐豐滿漂亮,相親當(dāng)天同居,第二天起床后:我還是太年輕

大熊歡樂坊
2026-06-20 06:23:24
為什么女性會有比男性更高的性快感?

為什么女性會有比男性更高的性快感?

宇宙時空
2026-06-04 18:20:08
2場0分鐘!韓國最貴歸化遭棄用,洪明甫為何死也不上卡斯特羅普

2場0分鐘!韓國最貴歸化遭棄用,洪明甫為何死也不上卡斯特羅普

劉哥談體育
2026-06-20 01:37:25
美國為何禁止種植竹子?終于清楚,原來竹子比我們想象的更可怕

美國為何禁止種植竹子?終于清楚,原來竹子比我們想象的更可怕

白日追夢人
2026-06-19 22:11:20
同學(xué)聚會,發(fā)現(xiàn)一個扎心的現(xiàn)實:年過40的女同學(xué)中,1/3沒有工作,1/3做著低薪但沒前途工作,剩下的1/3基本都在體制內(nèi)

同學(xué)聚會,發(fā)現(xiàn)一個扎心的現(xiàn)實:年過40的女同學(xué)中,1/3沒有工作,1/3做著低薪但沒前途工作,剩下的1/3基本都在體制內(nèi)

品讀時刻
2026-06-13 09:03:28
北大等名校赴泰招生,現(xiàn)場人滿為患,有大額補貼,評論區(qū)一片不滿

北大等名校赴泰招生,現(xiàn)場人滿為患,有大額補貼,評論區(qū)一片不滿

譚談社會
2026-06-18 20:04:33
發(fā)現(xiàn)朋友的孩子是唐氏兒,我該開口嗎?網(wǎng)友的回答吸引上萬共鳴!

發(fā)現(xiàn)朋友的孩子是唐氏兒,我該開口嗎?網(wǎng)友的回答吸引上萬共鳴!

夜深愛雜談
2026-06-19 21:54:50
日本球迷表態(tài),如果我們能世界杯奪冠,邀請 1 位中國人一起領(lǐng)獎

日本球迷表態(tài),如果我們能世界杯奪冠,邀請 1 位中國人一起領(lǐng)獎

酷侃體壇
2026-06-19 15:56:52
葡萄牙內(nèi)訌!新星打臉 C 羅:只是普通球員!球迷暴怒沖爛全隊

葡萄牙內(nèi)訌!新星打臉 C 羅:只是普通球員!球迷暴怒沖爛全隊

奶蓋熊本熊
2026-06-20 03:37:51
多家波蘭媒體:萊萬已決定轉(zhuǎn)會芝加哥火焰,下周一正式亮相

多家波蘭媒體:萊萬已決定轉(zhuǎn)會芝加哥火焰,下周一正式亮相

懂球帝
2026-06-19 18:21:21
酒商稱159瓶茅臺被扣后缺失 警方通報來了!

酒商稱159瓶茅臺被扣后缺失 警方通報來了!

看看新聞Knews
2026-06-19 01:16:02
孫藝珍難得曬母子合照!4歲小甜豆暴風(fēng)成長,遺傳父母大長腿

孫藝珍難得曬母子合照!4歲小甜豆暴風(fēng)成長,遺傳父母大長腿

達達哥
2026-06-19 19:00:57
最新結(jié)果!13票贊成0票反對,菲律賓政壇“變天”?菲或向俄求助

最新結(jié)果!13票贊成0票反對,菲律賓政壇“變天”?菲或向俄求助

策前論
2026-06-18 19:18:19
i7的“后媽裙”翻車了?這波ootd讓人看不懂

i7的“后媽裙”翻車了?這波ootd讓人看不懂

娛圈觀察員
2026-06-20 00:08:44
電動車或?qū)⒁蝗〈慷嗟亻_始大批投放!新型代步車已經(jīng)正式登場

電動車或?qū)⒁蝗〈??多地開始大批投放!新型代步車已經(jīng)正式登場

離離言幾許
2026-06-20 01:16:13
2026-06-20 07:07:00
集智俱樂部 incentive-icons
集智俱樂部
科普人工智能相關(guān)知識技能
5890文章數(shù) 4679關(guān)注度
往期回顧 全部

科技要聞

Anthropic被禁,智譜卻漲瘋了

頭條要聞

世界杯-美國2-0澳大利亞 提前一輪小組出線

頭條要聞

世界杯-美國2-0澳大利亞 提前一輪小組出線

體育要聞

世界杯最不知名球員,沒上場先漲粉600萬

娛樂要聞

孫藝珍曬母子合照!4歲小甜豆暴風(fēng)成長

財經(jīng)要聞

Token低價陷阱

汽車要聞

驚出冷汗!重慶實測奧迪A5L,華為智駕這波操作絕了…

態(tài)度原創(chuàng)

家居
本地
時尚
教育
公開課

家居要聞

綠意盎然 自然之境

本地新聞

世界杯黑馬佛得角:河北人開超市,溫州人當(dāng)老板

夏天上衣穿短不穿長,看看下面這幾款短上衣,顯高舒適顯比例

教育要聞

考生家長速看!多所985、研究型高校在蓉招生咨詢安排來了

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進入關(guān)懷版