新版摩爾定律來了 ChatGPT之父:AI算量18個月翻倍
半導(dǎo)體行業(yè)有個黃金定律,那就是Intel創(chuàng)始人50多年前提出的摩爾定律,指出芯片晶體管18到24個月翻倍,如今是AI時代了,“ChatGPT”之父Sam Altman提出了新版摩爾定律。
本文引用地址:http://butianyuan.cn/article/202302/443753.htmSam Altman 是OpenAI公司CEO,被稱為“ChatGPT”之父,他在社交媒體上發(fā)文提出新版摩爾定律要來了,稱全球人工智能運算量每隔18個月翻一番。
1965年,時任仙童半導(dǎo)體工程師、后來創(chuàng)立了Intel的戈登·摩爾發(fā)文指出,每隔18個月,半導(dǎo)體芯片的晶體管密度就會翻倍,被稱為摩爾定律,后續(xù)又被時間間隔修正為24個月,也就是兩年時間芯片密度翻倍,成本降低一半。
至于ChatGPT,它目前使用的是GPT-3大模型,有1750億參數(shù),已經(jīng)積累了1億用戶,日活超過1300萬,訓(xùn)練階段總算力消耗約為3640 PF-days(即1PetaFLOP/s效率跑3640天),成本預(yù)計在500萬美元/次。
未來會升級到GPT-4模型,有100萬億參數(shù),算力性能需要指數(shù)級提升。
評論