大模型代碼 文章 進(jìn)入大模型代碼技術(shù)社區(qū)

拿大模型代碼來(lái)訓(xùn)練自用小模型

• 1 前言上一期所刊登的《從CLIP 應(yīng)用領(lǐng)會(huì)隱空間的魅力》一文里，就是一個(gè)典型的范例：從Github 網(wǎng)頁(yè)下載OpenAI 公司的CLIP 源代碼(Source code)，然后搭配自己收集的小數(shù)據(jù)來(lái)訓(xùn)練一個(gè)給超市商家使用的小模型( 圖1)。圖1 Github上的免費(fèi)CLIP源碼那么，這大模型與小模型，兩者的代碼之間，有何不同呢？ 這可能會(huì)出乎您的預(yù)料，其核心模型的代碼，大多是一致的、相容的。常常僅是大模型的參數(shù)量很大，而小模型參數(shù)量較少而已。于是就能免費(fèi)拿來(lái)大模型的開(kāi)源代碼，把其參數(shù)量調(diào)小，搭配企業(yè)自有
• 關(guān)鍵字： 202312  大模型代碼  自用小模型