104學習精靈

調校

調校
關注
邀請朋友
邀請朋友

Line

Facebook

複製連結

取消
調校:主要負責對產品性能進行細緻調整,以確保其符合市場需求和客戶標準。需有效整合各部門資源,分析數據以制定優化策略,提升產品質量和效率。具備良好的問題解決能力、跨部門協作能力及溝通技巧,能夠在快速變化的環境中靈活應對挑戰,並具備扎實的技術背景。了解台灣市場特性及消費者需求,具備相關行業經驗者尤佳。
關於教室
關注人數 55 人
104人力銀行從職缺中挑選出常見技能所成立的官方教室,提供大家進行共學互動。
學習主持人
持續分享知識,
有機會成為官方教室主持人
教室標籤
關於教室
關注人數 55 人
104人力銀行從職缺中挑選出常見技能所成立的官方教室,提供大家進行共學互動。
學習主持人
持續分享知識,
有機會成為官方教室主持人
教室標籤
Hi~ 歡迎分享學習資源,有學習問題可匿名向Giver發問!
我要分享
我要提問

調校 學習推薦

全部
影片
文章
知識貓星球

喵星人

2024/08/09

Apple 開源 OpenELM AI 模型:功能、優勢及訓練框架解析
蘋果終於進軍AI領域,推出全新開源語言模型OpenELM。這篇文章將深入探討OpenELM的功能、優勢及其訓練框架,幫助開發人員了解如何在蘋果裝置上高效運行AI模型,提升工作效率和產品質量。
▍蘋果推出OpenELM:AI模型的新選擇
在微軟、Meta、Google等科技巨頭相繼發布自家AI模型後,蘋果終於發聲,推出了全新的開源語言模型家族——OpenELM。這個模型的全名是開源高效語言模型(Open-source Efficient Language Model),能夠在蘋果裝置上高效運行。OpenELM提供了四種不同參數規模的模型,分別是2.7億、4.5億、11億及30億參數,並且每個規模都有預訓練和指令調校兩個版本,總共提供了八種版本供開發者選擇。
▍多樣化模型選擇,滿足不同需求
蘋果已經在Hugging Face上公開了這些模型,並提供完整的訓練和評估框架,開發人員還可以利用提供的程式碼將模型轉換成MLX函式庫,以便在蘋果裝置上進行推論和微調。這意味著,無論是從事什麼樣的AI應用,開發人員都能找到適合的OpenELM模型版本來滿足需求。
▍高效訓練框架:CoreNet
在訓練方面,OpenELM模型使用了CoreNet函式庫作為訓練框架。其預訓練資料集包括了RefinedWeb、去除重覆資料的PILE、RedPajama和Dolma v1.6各一個子資料集,共1.8兆token。這樣的資料集配置使得模型在訓練過程中能夠獲得廣泛而深入的語言知識。
▍分層擴展策略提升準確率
OpenELM融合了分層擴展策略,能將模型參數有效分配到transformer模型各層,以提升準確率。例如,11億參數版本的OpenELM比12億參數版本的OLMo在準確率上高出2.36%,但使用的預訓練資料token僅為其一半。這展示了OpenELM在有效利用資源方面的優越性能。
▍性能比較:OpenELM vs 其他模型
蘋果也列出了OpenELM在不同裝置上的性能數據。在一台Nvidia GPU/Ubuntu筆電上,OpenELM 4.5億參數版本的提示執行效能已超過MobiLama,而2.7億參數版本與OPT相差無幾。在程式碼生成任務上,雖然各個版本都還有改進空間,但已經展示了不錯的潛力。此外,蘋果還提供了在Apple Silicon-based MacBook Pro上的執行數據,顯示出OpenELM在自家裝置上的優異表現。
▍蘋果的AI研發成果
這次OpenELM的推出,是蘋果繼去年十月開源多模語言模型Ferret及今年三月的MM1之後,再度展示其在AI領域的研發成果。與以往不同的是,OpenELM特別強調其在蘋果裝置上的高效運行能力,這對於廣大使用蘋果產品的開發者來說無疑是個好消息。
▍競爭與未來展望
目前,微軟也推出了可在筆電上執行的小語言模型(SLM)Phi-3系列,最小版本有38億參數。微軟強調Phi-3在語言理解、推理、數學及寫程式等能力上,比更多參數的模型如GPT-3.5 Turbo、Mistral還要強大。面對這樣的競爭,蘋果與其他晶片業者如英特爾、AMD、高通等,預計在今年內推出為AI模型執行設計的第一代或新一代晶片。蘋果最新的Apple Silicon M4預計在今年稍後問世,並會在年底推出搭載M4晶片的Mac產品。
OpenELM的推出標誌著蘋果在AI領域邁出了重要一步。通過開源這些高效能的語言模型及其訓練和推論框架,蘋果不僅為開發者提供了強大的工具,也展示了其在AI技術上的雄厚實力。無論是在語言理解、程式碼生成,還是其他AI應用領域,OpenELM都有望成為開發者的首選。
➤ 歡迎在104學習精靈關注【AI趨勢報-科技愛好者的產地】獲得更多科技新知!
看更多
1 0 2241 0
學習精靈

01/21 00:00

254 20
學習精靈

05/18 00:00

148 2

推薦給你

緯育TibaMe

06/20 14:43

📣免費直播講座│AI世代你該會的高效求職術!報名就有機會獲得履歷+面試QA GPTs工具
【你不是能力不好,只是沒說對話】
面試官問:「為什麼想應徵這份工作?」
你說出一大段,卻被回一句「我們會再通知你」
你不是沒準備,而是少了一個能幫你「講對話」的個人化教練
🎯 如果你也有這些困擾......
🔹 不知道怎麼對應履歷與職缺要求?
🔹 面試講得真心卻總是沒命中?
🔹 想知道 HR 心裡到底想看到什麼?
📌這場直播,你會學到:
🔥 了解AI 助力下現代人的求職優勢
🔥 求職前必備的優勢盤點技巧
🔥 善用 AI 工具打造面試官讚賞的履歷 & 應答
- NotebookLM 快速比對理想職缺與你的技能落點
- GPTs 一鍵優化履歷、自傳與面試回答
- Gamma 幫你把個人優勢做成視覺亮點,主管一眼看到重點
🎁 報名+出席直播送你「履歷+面試 #GPTs工具」
幫你依據不同求職階段最佳化形象包裝術!
▍ 直播講座資訊
🔹 時間:6/23(一) 20:00~21:00
🔹 講者:資深 AI 培訓顧問 Hubert、職涯溝通表達教練 Nina
🔹 講座形式:線上直播(將於活動前2~3天email提供直播連結)
🔸 立即報名:https://lihi.cc/K3SAn
看更多
0 0 522 0
你可能感興趣的教室