FSB50760SFT

制造商：ON

產品信息

在線購買

技術資料

應用案例更多案例

• 揭秘大語言模型可信能力的五個關鍵維度

  不同于上述工作從待干預模型自身抽取引導向量，我們意在從LLMs預訓練過程的切片中構建引導向量來干預指令微調模型（SFT Model），試圖提升指令微調模型的可信能力。

  2024-03-15
• 聊聊小公司如何做大模型

  通過SFT、DPO、RLHF等技術訓練了領域寫作模型。實測下來，在該領域寫作上，強于國內大多數(shù)的閉源模型。

  2024-02-21
• 一文解析PPO算法原理

  Reward Model的初始化：6B的GPT-3模型在多個公開數(shù)據(jù)（(ARC, BoolQ, CoQA, DROP, MultiNLI, OpenBookQA, QuAC, RACE, and Winogrande）上fintune。不過Paper中提到其實從預訓練模型或者SFT模型開始訓練結果也差不多。

  2024-01-09
• 探索SFT訓練策略對性能的影響

  大模型混合多種能力項數(shù)據(jù)進行微調時，會呈現(xiàn)高資源沖突，低資源增益的現(xiàn)象。我們提出的DMT策略通過在第一階段微調特定能力數(shù)據(jù)，在第二階段微調通用數(shù)據(jù)+少量的特定能力數(shù)據(jù)。

  2023-10-26
• 微軟開源“傻瓜式”類ChatGPT模型訓練工具

  DeepSpeed-RLHF 模塊：DeepSpeed-RLHF 復刻了 InstructGPT 論文中的訓練模式，并確保包括 a) 監(jiān)督微調（SFT），b) 獎勵模型微調和 c) 基于人類反饋的

  2023-04-14
• MSFT+ 0.4%以幫助其將正在開發(fā)的自動駕駛服務商業(yè)化

  與微軟的新合作伙伴關系加強了Cruise的推動力，使其與諸如Alphabet，Waymo和Amazon亞馬遜-0.4%Zoox在城市市場上提供可行的服務。不過，尚不清楚什么公司能夠進行大規(guī)模商業(yè)運營的確切時間。

  2021-01-26
• MSFT+ 0.4%以幫助其將正在開發(fā)的自動駕駛服務商業(yè)化

  微軟首席執(zhí)行官薩蒂亞·納德拉（Satya Nadella）在一份聲明中說：“數(shù)字技術的進步正在重新定義我們工作和生活的方方面面，包括我們如何移動人員和貨物?！薄白鳛榭唆斔购屯ㄓ闷嚬綠M+ 0.6%首選云，我們將利用Azure的力量...

  2021-01-29
• 三星SFT青少年探館進博會：大大舞臺點亮小小夢想

  for Tomorrow探知未來第十屆全國青年科普創(chuàng)新實驗暨作品大賽（SFT科普創(chuàng)新大賽）中學組特等獎學生，以及三星探知未來科技女性培養(yǎng)計劃（STEM GIRLS）優(yōu)秀學生組成的“Solve for Tomorrow走進進博會”代表團。 “三星Solve for Tomorrow走進進博會”代表團 這些年輕的臉

  2024-11-20

系列產品索引查看所有產品