新版摩爾定律來?ChatGPT之父:AI算量18個月翻倍
半導體行業有個黃金定律,那就是Intel創始人50多年前提出的摩爾定律,指出芯片晶體管18到24個月翻倍,如今是AI時代了,“ChatGPT”之父Sam Altman提出了新版摩爾定律。Sam Altman 是OpenAI公司CEO,被稱為“ChatGPT”之父,他在社交媒體上發文提出新版摩爾定律要來了,稱全球人工智能運算量每隔18個月翻一番。
1965年,時任仙童半導體工程師、後來創立了Intel的戈登·摩爾發文指出,每隔18個月,半導體芯片的晶體管密度就會翻倍,被稱為摩爾定律,後續又被時間間隔修正為24個月,也就是兩年時間芯片密度翻倍,成本降低一半。
至於ChatGPT,它目前使用的是GPT-3大模型,有1750億參數,已經積累了1億用戶,日活超過1300萬,訓練階段總算力消耗約為3640 PF-days(即1PetaFLOP/s效率跑3640天),成本預計在500萬美元/次。
未來會升級到GPT-4模型,有100萬億參數,算力性能需要指數級提升。