開源AI創造經濟價值(車品覺)
本文作者車品覺,為香港科技園有限公司董事、香港大學中國商學院客座副教授、阿里雲資深顧問,為《信報》撰寫專欄「全民大數據」。
早前Meta發布最新的開源大型語言模型Llama 3.1系列,這系列模型包括8B、70B和405B三種參數規模。其中405B參數規模的模型,在多項基準測試表現出色,超越了OpenAI的GPT-4o,並可媲美其他領先的閉源模型,例如Claude 3.5 Sonnet。Meta創辦人朱克伯格表示,Llama 3.1版本是行業的一個轉折點,預示着開源人工智能(AI)將成為未來主流。
在此次發布中,Llama 3.1版本的模型不僅在規模上有所擴展,還增加了上下文窗口的大小,從原來的8K增至128K,擴大了15倍,同時支援8種語言。尤其是405B模型,使用了超過15萬億個Tokens訓練,期間採用了1.6萬顆H100 GPU(繪圖處理器),是首個能達到如此規模的模型。評估了超過150個基準數據集後,Llama 3.1 405B模型在常識推理、操作性、數學等任務的表現,可比擬GPT-4、GPT-4o和Claude 3.5 Sonnet。同時,規模較小的8B和70B模型表現,與其他同等規模的開源和閉源模型不遑多讓。
在實際場景應用中,Llama 3.1 405B模型的整體性能,優於GPT-4o及Claude 3.5 Sonnet。Meta還更新了開源許可,允許開發者使用Llama模型(包括405B)的輸出以改進其他模型。儘管目前圖像、影片及語音整合功能還在開發,並未正式發布,但Meta指未來版本會整合這些功能。
筆者非常認同,開源AI能夠促進創新、降低成本和提高安全性。開發者亦可以利用開源模型來訓練、微調自己的模型,以滿足不同需求。
此外,開源模型的使用成本更低,效率更高,特別在運行推理任務時,成本約為封閉模型的一半,這使開發者能在自己的基礎設施上操作,加強數據安全。
開源AI代表着世界上最大的經濟契機和安全保障,也可以創造更大的經濟價值和更高的全球安全水平。至今為止,所有版本的Llama模型已超過3億次下載量,其廣泛受歡迎的程度和影響力已不言而喻。至於開源與閉源大模型之爭,其實也取決於數據開放程度和算力效率等。
(編者按:車品覺著作《覺悟.大數據》現已發售)
歡迎訂購:實體書、電子書
更多車品覺文章:
支持EJ Tech
如欲投稿、報料,發布新聞稿或採訪通知,按這裏聯絡我們。Related Posts
Latest News
-
提高警覺辨別真假客服(林國誠)
近期有不法之徒瞄準每個人生活不可或缺的電訊服務進行詐騙活動。有報道指出,不少市民成了假冒電訊商客戶服務主任的行騙目標。
- Posted November 1, 2024
- 0
-
消費電子添醫療功能意義重大(黃岳永)
早前新推出AirPods Pro 2獲得美國食品及藥物管理局(FDA)批准可作為非處方助聽器,潮流產品發展至醫學級別的應用,不再只是「用途廣泛」四字可簡單概括,而是意味着醫療健康產品市場的革命。
- Posted November 1, 2024
- 0
-
AI新定義|開放原碼促進會 制定開源AI標準
不少科技巨企盼在市場搶佔一席位,近年推出自家人工智能(AI)開源大模型。開放原碼促進會(Open Source Initiative, OSI)近日公布「開源AI定義」,為開源AI大模型制定全新標準。
- Posted November 1, 2024
- 0
-
童年回憶|任天堂經典遊戲音樂重溫
任天堂宣布為香港區在內的Switch Online付費會員,推出Nintendo Music流動應用程式,讓蘋果iOS及谷歌Android平台的手機用戶,隨時重溫任天堂過去數十年的經典遊戲原聲音樂。
- Posted November 1, 2024
- 0
-
晶片大戰|蘋果M4 Max晶片 較英特爾快1.5倍
蘋果公司周三發布新版MacBook Pro手提電腦,首次介紹專為Apple Intelligence設計的新一代晶片M4 Max。
- Posted November 1, 2024
- 0
-
實現未來科學|Atlas人形機械人全自主執貨
美國機械人初創波士頓動力(Boston Dynamics)最近發布影片,介紹旗下Atlas人型機械人最新突破,在機器學習(Machine Learning)視覺模型支持下,機械人在模擬工廠環境中,可以完全自主執行任務。
- Posted November 1, 2024
- 0
-
科大AI快速測乳癌 涵蓋30多種疾病
香港科技大學最近透過其人工智能(AI)運算設施,以大量數據結合機器學習訓練,研發四大嶄新的AI醫學診斷系統,包括通才、放射學、病理學等基礎模型,以及「可解釋的人工智能」,為多達30種癌症及疾病提供診斷和預後評估。
- Posted November 1, 2024
- 0