Skip to content
TheChatArchiveThe Chat Archive
Human-written demonstration (OpenAssistant volunteers)· OpenAssistant (human-written)Hugging Face OpenAssistant Conversations (oasst2)

Wie programmier ich meine eigene mini chatbot KI?

In OpenAssistant data, “assistant” turns were written by human volunteers as demonstrations. They are not model outputs.
  1. User

    Wie programmier ich meine eigene mini chatbot KI?

  2. Assistant

    Dazu ist Folgendes erforderlich:

    1. Implementieren Sie ein großes Sprachmodell mit Transformern
    2. Sammeln Sie viele Textdaten, um das Sprachmodell zu trainieren
    3. Trainiere das Sprachmodell auf diesen Daten
    4. Sammeln Sie Demonstrationsdaten der Eingabeaufforderungen und der gewünschten Ausgabe
    5. Optimieren Sie das Modell anhand dieser Daten
    6. Verwenden Sie einen Menschen, um sich die Antworten des Modells anzusehen und sie von den besten bis zu den schlechteren zu ordnen, und erstellen Sie damit einen Datensatz
    7. Implementieren und trainieren Sie ein Belohnungsmodell, das Antworten einordnen kann
    8. Verwenden Sie PPO und das Belohnungsmodell zusammen mit dem LLM

Responses were produced in different, uncontrolled contexts (system prompts, settings, prior turns). This is not a benchmark.