激情国产视频_午夜黄色影院_久久久夜夜夜_亚洲视频二区_日日夜夜国产_欧美自拍偷拍

Internet Develppment
互聯網開發& 推廣服務提供商

我們擅長商業策略與用戶體驗的完美結合。

歡迎瀏覽我們的案例。

首頁 > 新聞中心 > 新聞動態 > 正文

OpenAI王炸第二彈強化微調:12個例子搞定專業學習推理,Altman稱為今年最大驚喜

發布時間:2024-12-07 09:59:33來源:華爾街見聞

  OpenAI研究員演示,強化微調后的o1 mini測試通過率甚至比正式版o1高24%,比未強化微調的o1 mini提高了82%。

  OpenAI連續12天“王炸”的第二彈來了。不同于第一日聚焦人工智能(AI)模型,第二日的王炸專注于服務企業等組織的一款新功能,雖然看起來不太側重于普通消費者,但據介紹它甚至可以簡易版推理模型o1 mini的效果超過本周四發布的正式版o1、即所謂滿血o1。

  美東時間12月6日周五,OpenAI在社交媒體X公布第二日活動的主題是新功能“強化微調”(Reinforcement Fine-Tuning)。這個主題是指,企業組織將能夠通過“強化微調”微調o1 mini,滿足他們的特定需求。

  OpenAI CEO Sam Altman在X發帖稱,強化微調的效果非常棒,是他今年最大的驚喜之一,期待看到大家利用這種功能的創造。
  OpenAI的研究員本周五介紹,科學家、開發人員和研究人員可以根據自己的數據、而不是僅僅使用公開可用的數據,量身定制OpenAI的強大推理模型o1。不同行業的人可以使用強化學習來創建基于 o1 的專家模型,從而提高該領域的整體專業知識水平。開發者、研究者和機器學習工程師將首次能運用強化學習,打造在精通他們各自專業領域的專家模型。

  OpenAI的研究員稱,強化微調并不是單單教模型模型輸出,它的運作方式是,當模型發現一個問題的時候,研究者給模型空間區仔細思考這個問題,然后評估模型給出的最終解答,運用強化學習,研究者可以強化產生正確答案的思路,抑制產生錯誤答案的思路,只需要“幾十個例子”(a few dozen examples)、甚至12個例子,模型就能以有效的新方式學習特定領域的推理。

  通過強化學習,用戶可以用大模型在特定數據上訓練其他模型。這對于涉及到大量數據的復雜領域或需要專家領域知識的新研究非常有用。研究者舉例稱,最近和湯森路透合作,運用強化微調微調o1 mini,讓充當法務助理,幫助他們的法律專業人士完成大部分分析工作流。

  OpenAI稱,OpenAI的定制模型平臺將支持強化學習,強化學習也是OpenAI內部用于訓練自家前沿模型的技術,如GPT-4o和o1系列模型。在OpenAi的內測中,強化微調已經在生物化學、安全、法律和醫療保健領域取得成功。OpenAI計劃,2025年初讓強化微調面向公眾發布,目前已對企業、大學和研究院開放申請測試通道。

  伯克利大學罕見遺傳病研究員 Justin Reese參與了OpenAI本周五對o1 mini模型的現場演示。演示中,研究者試圖從樣本數據池中獲取可能導致疾病的模型 ID 基因。

  研究員展示了一個評估表,下圖可見,第一行是本周四OpenAI發布的正式版o1測評表現,第二行是o1 mini的測評結果 ,第三行結果來自經過最終強化微調的o1 mini。研究員進行了三類評估,其中,top @1是測試模型給出的正確答案出現在列表最前列中的概率,top@5是正確答案出現在前五列的概率,top@max是答案出現在所有正確答案列表的概率。

  如圖所示,正式版o1的測試通過率為25%,o1 mini為17%,而強化微調后的o1 mini竟然達到31%,超過了正式版o1,比正式版o1的測評結果高24%,而且相比未強化微調前,微調后的結果提高了82.3%?!?/p>

  據OpenAI所說,用戶可以綜合運用o1、微調和數據創建定制的小型 o1模型 o1 mini。用戶要做的就是提供數據,然后在強化微調方面,設置一個數據集和一個“評分器”,根據訓練和驗證數據集評估模型的性能,其他工作交給OpenAI。

最新資訊
? 2018 河北碼上網絡科技有限公司 版權所有 冀ICP備18021892號-1   
? 2018 河北碼上科技有限公司 版權所有.
主站蜘蛛池模板: 国产精品国内免费一区二区三区 | 疯狂做受xxxx高潮不断 | 岛国毛片在线观看 | xoxo日本视频毛片 | 久久精品国产亚洲av成人 | 无码h黄动漫在线播放网站 无码h黄肉3d动漫在线观看 | 亚洲av无码有乱码在线观看 | 毛片免费全部免费播放 | 国产男女性特黄录像 | 亚洲综合另类小说色区色噜噜 | 欧美精品一区二区三区观 | 日韩精品一区二区三区不卡 | 午夜影网 | 波多野结衣免费一区视频 | 精品一区二区三区18 | 亚洲精品久久夜色撩人男男小说 | 愉拍自拍视频在线播放 | 五月花成人网 | 国产精品久久久久久久久久直 | 成年人午夜免费视频 | 欧美视频一区二区在线观看 | 美女被免费网站在线jk视频 | 精品400部自拍视频在线播放 | 一二三四视频6+1在线观看免费 | a级毛片100部免费观看 | 欧美亚洲一区二区三区在线 | 人人爱人人射 | 国产一区二区三区在线免费观看 | 草草视频免费看 | 亚洲色图 激情小说 | 99re6在线视频精品免费 | 综合久久99 | 在线欧美精品一区二区三区 | 99热在这里只有精品 | 国产在线观看美女福利精 | 亚洲最大激情网 | 午夜久久久久久 | 蜜臀av性久久久久蜜臀aⅴ | 一区二区三区免费视频观看 | 亚洲国产精品自在现线让你爽 | 国产成a人亚洲精v品无码性色 |