面對AI:中國缺失的是什麼?(圖)
【看中國2023年7月31日訊】一個半個月前,AMD的蘇姿豐發布了新款大語言模型GPU MI300X,據說比Nvidia的H100更小更快。
說起來,美國朋友追求又小又快已經很多年了。
最近,浙江人民出版社的朋友寄給我一本《晶元戰爭》,說你看看。我說我看過英文版,總是打開又合上,合上又打開。他說你是看不懂英文嗎?看不起誰呢,my English is fine thank you, and you?
中文版的《晶元戰爭》翻譯的不錯,作者用一個個晶元發展史上的歷史故事告訴讀者,為什麼靠砸錢和堆人搞不出晶元產業。因為整個行業的分工極為細密,背後是一個極其複雜的商業生態系統,這個系統不可能源於任何政府扶持,也不可能有任何國家做到全產業鏈獨立自主,它依靠的是企業家們像生物演化一樣的:自行冒險和優勝劣汰。
中國人是不缺優勝劣汰的,缺不缺冒險精神,網上一直爭論不休。要說不缺吧,考公的人是越來越多,要說缺吧,ChatGPT大火之後的短短几個月內,國內光是上市公司就有9個老闆說自己要搞大模型後隨即離婚的,導致原本就不富裕的存量夫妻數量因此「雪上加霜」。
最重要的是,你看AI晶元最核心的三個大拿黃仁勛、蘇姿豐和張忠謀都是華裔。再具體一點,他們都是胡建(福建)裔。
一
自從幾萬年前人類征服了藍色星球之後,仰望星空後的好奇促使大家做了一個違反祖宗的決定——暴露自己,不顧黑暗森林法則。至於為什麼這麼做,千百年來從哲學家到科學家做過很多解釋。覺得,主要是因為太過孤獨。
為了對抗集體孤獨感,除了尋找地球之外的智慧生命,還有就是試圖給自己之外的東西注入神性。
從遠古神話裡出現的黃金機器人到雪萊的《科學怪人》,從亞里士多德的三段論邏輯到微積分發明人萊布尼茲試圖設計一種普適性語言,經歷了幾千年的探索,即便在計算機技術不斷進步後,人類還經歷了無數次挫敗。
具體到怎麼讓機器人和人自然對話甚至完成交辦的任務這方面,直到2017年,谷歌的一篇論文《Attention is all you need》,才算是真正打開了局面。這篇論文看起來很簡潔,主要就是講Transformer(翻譯器)是怎麼工作的,這個Transformer就是ChatGPT裡的T。
有了可以驗證的理論,大家就把大語言模型的訓練實現基本簡化為了兩個要素:語料和算力。簡單來說,先要有足夠多的文字內容,然後要規劃學習方法,比如自己學習,工程師監督學習和用戶反饋後的強化學習。看起來和人類學習過程差不多,但機器學習是可以開挂的,想讓它加快學習過程,就要上算力,大幅提升訓練速度。比如,為了訓練ChatGPT-3,微軟給OpenAI配了10000張A100顯卡,單次訓練成本上千萬美元,這個我們中國人理解起來一點也不難。想讓孩子上清北嗎?從小學開始就要擇校,吃好的用好的還要報各種班。
去年底ChatGPT大火之前,連搞AI的人自己都在懷疑自己。阿里雲在去年降價了6次,GPU租用價格下降了兩成,騰訊也直接砍掉了對NVIDIA GPU的採購單。然後,ChatGPT火了,大家紛紛宣布我也行,我也能上。最誇張的是很善於做全家桶的周總(周鴻禕),他說:「比爾·蓋茨都沒我看得準。」
20多年前,從亞馬遜誕生到阿里巴巴誕生,大概用了5年;從有ICQ到騰訊有OICQ,大概用了兩年;從谷歌誕生到百度誕生,大概用了15個月。從ChatGPT大火到「比爾·蓋茨都沒我看得準」用了多久呢?——一個季度。
大家樹新風的樣子,像極了在大集上喝早酒的山東朋友。一開始,鏡頭前的本地大哥都是配著羊湯喝瓶啤酒或者二兩白酒。後來,出現了一碗羊湯配一斤散簍子的大媽和兩斤散簍子的大爺。到最後,有個大哥抱了一桶十斤裝的白酒告訴拍攝者:這是我一天的量。
只有少數還沒上頭的。媒體問位元組副總裁楊震原有沒有開發大模型,楊震原會說我們在學習。被問到大模型進展怎麼樣,他說很初級、不成熟。
騰訊也是一貫的務實風格。馬化騰說對於工業革命來講,早一個月把電燈泡拿出來,在長的時間跨度上來看是不那麼重要的。關鍵還是要把底層的演算法、算力和數據紮紮實實做好,而且更關鍵的是場景落地,目前我們還在做一些思考。我感覺現在有很多公司太急了,感覺是為了提振股價。
你就直接報周總(周鴻禕)身份證號得了。
二
6月26日,鋰電池的發明者古迪納夫去世,享年100歲。3年前,他以97歲高齡成為了諾貝爾獎歷史上最年長的得主。
在看訃告時,筆者讀到了他的一句話——我們有些人就像是烏龜,走得慢,一路掙扎,到了而立之年還找不到出路。但烏龜知道,他必須走下去。
華人特別喜歡歌頌速度。蘇姿豐30歲時憑藉設計銅電路替代鋁電路成為了IBM CEO的技術助理;黃仁勛30歲時和兩位工程師一起創立了NVIDIA。底層文化裡,華人是不可能稱讚烏龜的,大家稱讚的都是「高大全快」。
相反,德日甚至瑞典的一些企業可能產品看起來一點不起眼,一個軸承,一顆螺絲甚至一個銼刀,一捆絕緣線能鑽研一輩子,但全世界工業企業都離不開他們。當經濟高速發展時,他們把自己投入大生態順勢而為,當經濟進入下行週期的時候,這些企業靠著專精能力,活得也很舒服。
這種跨越週期的能力,大概就是古迪納夫說的「烏龜」吧。
現在,習慣了快的我們也慢下來了,筆者覺得大夥面對大模型這種時代巨浪還是要有些定力,如果搞不起軍備競賽,雇不起大量的北大應屆生,那還是先冷靜冷靜,想想大模型對自己有啥用,算清楚ROI。如果用大模型比僱人幹活還要貴,還不如多招些人,也是為就業做貢獻了。
這樣對很多企業來說是最划算和安全的,風浪越大魚越貴是沒錯,但首先要保證自己一直在船上。
責任編輯:宇真
短网址: 版權所有,任何形式轉載需本站授權許可。 嚴禁建立鏡像網站。
【誠徵榮譽會員】溪流能夠匯成大海,小善可以成就大愛。我們向全球華人誠意徵集萬名榮譽會員:每位榮譽會員每年只需支付一份訂閱費用,成為《看中國》網站的榮譽會員,就可以助力我們突破審查與封鎖,向至少10000位中國大陸同胞奉上獨立真實的關鍵資訊, 在危難時刻向他們發出預警,救他們於大瘟疫與其它社會危難之中。
看完這篇文章您覺得
- 【宋紫鳳專欄】從潘美到潘仁美 是藝術加工還是神來之筆(組圖)
- 江曾一政策藏汙納垢 老虎前仆後繼終南捷徑(組圖)
- 中國經濟舊模式大潰敗 注定一個時代已經結束(圖)
- 【貫明專欄】臺灣最美的海灣 人間仙境七星潭(視頻)
- 水果皇后——草莓(組圖)
- 戰火無情 造化弄人 那一代人的離合滄桑(組圖)
- 南早曝李玉超等3軍頭落馬 秦剛、傅曉田涉火箭軍泄密案(圖)
- 即將被中共引渡處決 百億大佬抖出驚天黑幕(圖)
- 習近平之亂:高層亂 官場亂 內政外交亂(圖)
- 外交部官網秦剛名字「復活」習近平意欲何為?(圖)
- 秦剛大學同學揭短?求學、上位史疑曝光(圖)
- 習近平女兒力挺!秦剛死而復生!解放軍2027年攻臺?(視頻)
- 京城中的僧人預言 將至的災難與兩隻猛犬(圖)
- 涉破壞習近平的「祖脈」?這名高官罪名極為罕見(圖)
- 中共肺炎(又称武漢肺炎)
- 病毒
- COVID-19
- 疫苗
- 台鐵
- 拜登
- 川普
- 特朗普
- 國安法
- 貿易戰
- 習近平
- 華為
- 三峽大壩
- 新疆棉
- 長江
- 洪水
- 袁弓夷
- 港版國安法
- 漢光演習
- 國民黨
- 退黨
- 弗洛伊德
- BLM
- 中共
- 閻麗夢
- 金正恩
- 王岐山
- 賴清德
- 孟晚舟
- 關稅
- 邊境牆
- 彭斯
- 美國
- 貿易談判
- 劉鶴
- 王滬寧
- 江澤民
- 崔永元
- 中南海
- 內幕
- 中共
- 反送中
- 貪官
- 情婦
- 腐敗
- 反腐
- 打虎
- 官場
- 看中國
- 一國兩制
- 法廣
- 社交媒體
- 往事微痕
- 出賣國土
- FB
- 六四
- 朝鮮
- 加拿大
- 脫歐
- 央行
- 債務
- 槓桿
- 美元
- 貨幣
- 人民幣
- 歐元
- 日元
- 港幣
- 房地產
- 樓市
- 財政
- 財富
- 中產
- 海參崴
- 台灣
- 蔡英文
- 北京
- 劉強東
- 大媽
- 房價
- 疫苗
- 非洲豬瘟
- 大陸
- P2P
- 霧霾
- 基因編輯
- 防火牆
- 維權
- 709律師
- 上訪
- 法輪功
- 網絡審查
- 活摘器官
- 江東六十四屯
- 唐努烏梁海
- 長白山
- 白龍尾島
- 江心坡
- SARS
- 新疆勞改營
- 言論自由
- 女主播
- 央視
- 華人
- 移民
- 華人
- 留學
- 海關
- 遣返
- 簽證
- 回國
- 入籍
- 綠卡
- 民生
- 海外
- 加拿大
- 澳洲
- 民國
- 桂軍
- 抗戰
- 孫中山
- 蔣介石
- 宋美齡
- 鄧小平
- 林彪
- 劉奇
- 中共
- 皇帝
- 諸葛亮
- 易經
- 幽默人生
- 智慧
- 感悟
- 手機
- 預言
- 奇聞
- UFO
- 外星人
- 壽命
- 文革
- 養生
- 紫鳳
- 貫明
- 李道真
- 軼飛
- 李雲飛
- 雲中君
- 辛思
- 夏聞
- 時代漫談
- 滄海
- 東方縱橫
- 唐柏橋
- 王尚一
- 江楓
- 黃清
- 李唐風
- 園丁
- 今濤拍暗
- 李青城
- 秦就石
- 中經研
- 秦天靖
- 江浩
- Eagle Vision
- 李子壬
- 馬新宇
- 馬來啟
- 紫君
- 秦山
- 陳破空
- 戴東尼
- 曹長青
- 邢仁濤
- 瑜正
- 簡易
- 肖川
- 伍凡
- 顧言
- 歸瑜
- 乙欣
- 陳泱潮
- 徐沛
- 習近平訪歐前夕 馬克龍批中共籲歐洲「覺醒」(圖)
- 華為匿名在美國活動 或導致禁令升級(圖)
- 土耳其:暫停以色列貿易直至加沙永久停火(圖)
- 北約稱俄羅斯加劇混合攻擊成員國 英媒:基輔最終須與莫斯科談判(圖)
- 大量購買黃金 習近平為27年入侵臺灣做準備?(圖)