Mia碼上AI
AI 基礎概念·

AI 真的是黑箱嗎?用「可解釋性」打開輝達 Nemotron 的腦子

影片裡那個旋鈕就在這兒。選一個名字,拖動旋鈕:往左是「不認識」,往右是「認識」。下面每一句都是 Nemotron 3.5 Bolt 真跑出來的,原文是英文,我配了中文翻譯。

闖關 · 煉丹房 · 第 7 關看完這條就過一關,+30 經驗這一關過了
下一關
在 YouTube 訂閱

自己擰一擰

← 不認識認識 →

NVIDIA Nemotron 3.5 Bolt

Mia 的小貼士

  • 我用的是輝達 10 月 23 號發布的 Nemotron 3.5 Bolt(E4B,BF16),在自己的電腦上跑,一塊 16G 視訊記憶體的顯示卡;模型很大的那張每層嵌入表放在記憶體裡查,其餘放顯示卡。
  • 上面每一格是「從頭到尾一直加 n 倍這個方向」的結果,每一格只跑了一次,回答只截了開頭,一個字沒改。這個方向是怎麼算出來的,下載下面的程式碼就能看到。

實驗程式碼

整個實驗就一個 Python 檔案:載入模型、收集兩組名字的內部狀態、算方向、擰旋鈕。要一塊 16G 視訊記憶體左右的顯示卡。

有問題?去 YouTube 留言區聊聊