您當前的位置:首頁 > 熱點資訊 > 正文

ChatGPT是怎樣一步步從“人工智障”成為“人工智能”的？（附報告下載）

時間：2023-02-28 07:05:06 來源：曉莊同學產品筆記

chatGPT最近是火的一塌糊涂，但你知道它是怎樣一步步成為“人工智能”的么？

今天就通過一個PPT為大家揭秘一下它的訓練模型~

(相關資料圖)

估計還有很多人對ChatGPT不是很熟悉，我們還是先來一波簡單的介紹吧：

Generative Pre-trained Transformer生成型預訓練變換模型

GPT是”Generative Pre-trained Transformer“生成型預訓練變換模型的縮寫，目的是為了使用深度學習生成人類可以理解的自然語言。目前我們討論的GPT一般指的是GPT-3，顯而易見，在之前還有GPT-2和GPT。

GPT-3是由人工智能公司OpenAI訓練與開發(fā)，該模型設計基于谷歌開發(fā)的變換語言模型。GPT-3的神經網(wǎng)絡包含1750億個參數(shù)，為有史以來參數(shù)最多的神經網(wǎng)絡模型。OpenAI于2020年5月發(fā)表GPT-3的論文，微軟在2020年9月22日宣布取得了GPT-3的獨家授權。

ChatGPT: 為對話而優(yōu)化的語言模型

按照OpenAI官方的說法“我們已經訓練了一個名為 ChatGPT 的模型，它以對話的方式進行交互。對話模式使 ChatGPT 能夠回答連續(xù)的問題、承認錯誤、質疑不正確的前提并拒絕不恰當?shù)恼埱?。ChatGPT 是InstructGPT的兄弟模型，InstructGPT模型被訓練為遵循對話中的指令并提供詳細的響應?！?/p>聊天機器人ChatGPT

ChatGPT是基于GPT3.5優(yōu)化的一個模型，可以理解為是一個通用聊天機器人。根據(jù) OpenAI 的說法，GPT-3.5通過吸收大量來自網(wǎng)絡的內容，包括成千上萬的維基百科條目、社交媒體帖子和新聞文章，來學習句子、單詞和部分單詞之間的關系。

好了，接下來進入正題，我們來看一下ChatGPT是怎樣訓練的~

最后，我們來問問它，看它怎么說~

報告下載

另外呢，我還收集到了這么兩份，非常詳細的關于ChatGPT的報告。

有興趣的小伙伴，直接在下方公眾號內回復關鍵字“ChatGPT報告”，就可以下載下來研究啦~

往期推薦

標簽：人工智能語言模型一塌糊涂