Andrej Karpathy
Karpathy 給理解 LLM 輸出的幾種方式排了個名,定製講解影片排第一
LLM 包攬的跑腿活越來越多,Karpathy 預計我們的工作會更多地轉向監督和理解,而且他希望模型在這件事上也能幫上忙。他把幾種方式從好到最好排了一遍:用 ASD-STE100 寫的解釋,這是一種為航空航天維修文件設計的受控英語;一張圖;一個可互動的 HTML 頁面;以及一段 3Blue1Brown 風格的定製講解影片,他說這一項已經開始能做出來了。既然程式碼現在已經不稀缺了,他建議大膽去要那種體量很大、用完就扔的產出,這種東西放在以前根本不值得做。他還分享了一個 eval:對 16,200 個座標逐一問模型“陸地還是水域?”,再把答案畫成圖。從圖上看,模型知道哪裡是陸地,而這些知識僅僅來自對網際網路的壓縮。
- #evals
- #prompting
