Human-written demonstration (OpenAssistant volunteers)· OpenAssistant (human-written)
OpenAssistant Conversations (oasst2)
Wie programmier ich meine eigene mini chatbot KI?
In OpenAssistant data, “assistant” turns were written by human volunteers as demonstrations. They are not model outputs.
- User
Wie programmier ich meine eigene mini chatbot KI?
- Assistant
Dazu ist Folgendes erforderlich:
- Implementieren Sie ein großes Sprachmodell mit Transformern
- Sammeln Sie viele Textdaten, um das Sprachmodell zu trainieren
- Trainiere das Sprachmodell auf diesen Daten
- Sammeln Sie Demonstrationsdaten der Eingabeaufforderungen und der gewünschten Ausgabe
- Optimieren Sie das Modell anhand dieser Daten
- Verwenden Sie einen Menschen, um sich die Antworten des Modells anzusehen und sie von den besten bis zu den schlechteren zu ordnen, und erstellen Sie damit einen Datensatz
- Implementieren und trainieren Sie ein Belohnungsmodell, das Antworten einordnen kann
- Verwenden Sie PPO und das Belohnungsmodell zusammen mit dem LLM
Other models, same or similar prompt
Responses were produced in different, uncontrolled contexts (system prompts, settings, prior turns). This is not a benchmark.
Identical first prompt
- Human-written demonstration (OpenAssistant volunteers)Compare side by side →
- Human-written demonstration (OpenAssistant volunteers)Compare side by side →
- Human-written demonstration (OpenAssistant volunteers)Compare side by side →
- Human-written demonstration (OpenAssistant volunteers)Compare side by side →
- Human-written demonstration (OpenAssistant volunteers)Compare side by side →
- Human-written demonstration (OpenAssistant volunteers)Compare side by side →
- Human-written demonstration (OpenAssistant volunteers)Compare side by side →
- Human-written demonstration (OpenAssistant volunteers)Compare side by side →
- Human-written demonstration (OpenAssistant volunteers)Compare side by side →