human
オープンアシスタントの構築方法について教えてください。GPTをチャットするのはどのように似ており、違うのですか？科学者が理解できるレベルで私に説明してください。彼らは3年間の業界経験と学部生があるとしましょう。
gpt
Chat GPTは、「人間のフィードバックを使用して指示に従うためのトレーニング言語モデル」に基づいてOpenAIによって開発されたシステムです。これをここで読むことができますhttps://arxiv.org/abs/2203.02155。この論文は、人間のフィードバックからの強化学習としても知られている人間のフィードバックを使用して、大規模な言語モデル（LLM）を人間の意図に合わせることに焦点を当てています。それ自体では、これらのモデルは次のテキストのトークンを予測しようとします。これは、RLFHが修正する有用または真実の答えと必ずしも一致するとは限りません。Chat GPTは、ユーザーがRHLFでトレーニングされたLLMと対話できるツールです。チャットGPTのトレーニングに使用されるモデルとデータは独自であり、ユーザーが利用できないことに注意することが重要です。

オープンアシスタントは、RLHFのデータ収集がクラウドソーシングされているチャットGPTのオープンソースの代替品として開発されています。目標は、ユーティリティがGPTと類似したツールを作成することですが、オープンデータセットと可用性で無料で使用でき、独自のハードウェアでモデルを実行してタスクでカスタマイズできます。
human
より短い応答を提供してください。
gpt
Chat GPTは、人間のフィードバック（RLHF）を使用して大規模な言語モデル（LLM）を人間の意図と整列させるOpenAIのシステムです。これにより、ユーザーはRLHFでトレーニングされたLLMと対話できますが、使用されるモデルとデータは独自です。

Chat GPTに代わる無料のオープンソースのオープンアシスタントは、クラウドソーシングRLHFを使用して開発されています。モデルを独自のハードウェアで実行する機能を提供し、特定のタスクのカスタマイズを可能にします。