Dieser Inhalt ist nur für snipKI Mitglieder bestimmt.
Jetzt beitreten

Open Web UI mit lokalem Google Gemma Modell auf deutschem Server einrichten

Klicke auf die Sterne, um eine Bewertung hinzuzufügen
( 5 )
Veröffentlicht: vor 1 Tag 108 Ansichten 1 Kommentar

Willst du ein eigenes ChatGPT auf deinem eigenen Server betreiben – ganz ohne Cloud und mit vollem Datenschutz? In diesem Snip zeige ich dir, wie du mit Open WebUI und einem Google Gemma Modell dein eigenes Open-Source-Chatbot-System auf einem deutschen Server installierst und einrichtest.

Ergebnis: Nach diesem Snip hast du erfolgreich ein eigenes Open WebUI Interface auf einem deutschen Hetzner-Server installiert und ein lokales, leistungsstarkes Open-Source-Sprachmodell von Google (Gemma) eingebunden. Damit kannst du deine eigene, datenschutzfreundliche AI-Chatlösung betreiben.

ExpertInnen
  1. Account bei Elastio erstellen und Free-Trial sichern.
  2. Neue Instanz erstellen:
    • “Create a new Service” klicken.
    • “Open WebUI” auswählen.
    • Hetzner als Hostinganbieter wählen (z. B. Falkenstein).
    • Kleinstes Paket auswählen, für das Tutorial ausreichend.
    • Support-Level auf 1 lassen.
    • Instanz starten und Admin-Oberfläche öffnen.
  3. Zugangsdaten aus dem Admin-Bereich kopieren und Login durchführen.
  4. Lokales Modell einbinden:
    • In den Admin-Bereich wechseln.
    • Unter “Modelle” neues Modell hinzufügen.
    • Modell-Tag für Google Gemma aus der OLAMA Library auswählen.
    • Modell installieren und aktivieren.
  5. Nutzung testen:
    • Neues Chatfenster öffnen.
    • Gemma Modell auswählen und Fragen stellen.
  6. Erweiterungen hinzufügen:
    • Open WebUI Community öffnen.
    • Funktionen (z. B. Web-Scraping Tool) auswählen und importieren.
    • Funktionen aktivieren und verwenden.
  7. Zusätzliche Modelle (z. B. Perplexity) parallel installieren und vergleichen.
  1. Verstehen, wie man einen Open-Source-Chatbot lokal auf einem deutschen Server installiert.
  2. Erlernen der Nutzung und Einbindung von Google Gemma Modellen über OLAMA in Open Web UI.
  3. Bedienung der Admin-Oberfläche zur Verwaltung von Nutzern, Modellen und Funktionen.
  4. Verständnis der Vorteile lokaler KI-Modelle in puncto Datenschutz und Datenhoheit.
  5. Erweiterung der Open Web UI Funktionalität durch Community Plugins und Tool-Importe.
  1. Lokale KI-Assistenzsysteme in Unternehmen für vertrauliche Datenverarbeitung.
  2. Customizer Chatbots für Kundenservice mit eigenen Trainingsdaten.
  3. Forschung und Entwicklung von KI-Modellen ohne externe Datenteilung.
  4. Interaktive Lernplattformen mit datenschutzkonformen KI-Systemen.
  5. Private KI-Systeme für kreatives Schreiben oder Codieren ohne Cloud.
Als nächstes
Teilen

Neugierig auf mehr?

Bereits über 300 praxisorientierte und kompakte KI-Tutorials warten auf dich!