25.04.2023

Eigenes Wissen dank der Vektordatenbank Weaviate durchsuchen.

ChatGPT ist ein KI-basiertes Chatbot-System, das bei einer Vielzahl von Themen hilfreich sein kann. Allerdings hat ChatGPT 3 seine Grenzen, wie die Begrenzung auf 4096 Token oder etwa 2.000 Wörter, was bedeutet, dass es keine Bücher oder längere Texte verarbeiten kann. Auch verfügt ChatGPT nur über allgemeines Wissen, aber nicht das exakte Wissen von einzelnen Quellen. Um diese Hürde zu überwinden und den Nutzen von ChatGPT für Lernende zu maximieren, haben wir schulKI noch weiter verbessert.

schulKI ermöglicht den Upload von eigenen PDFs und Bildern

Eine der neue Funktion von schulKI ist die Möglichkeit, eigene PDFs und Bilder hochzuladen. Durch lässt sich spezifisches Wissen ergänzen, welches ChatGPT nicht vorliegt. Der Upload-Prozess wird derzeit optimiert, um die bestmögliche Benutzererfahrung zu bieten. Schon jetzt werden Fotos in den Dokumenten und Bildern per OCR in Text umgewandelt.

Speicherung und Zugriff auf relevante Textstellen

Nachdem ein Dokument hochgeladen wurde, speichert schulKI den Text und legt passende Textstellen den Fragen im Chat bei. Es ist jedoch wichtig zu beachten, dass das System keine Zusammenfassungen der Dokumente erstellt, sondern lediglich auf einzelne relevante Stellen verweist.

Finden der passenden Stellen durch Vektoren

Um die passenden Stellen im Text zu finden, setzt schulKI auf Embeddings bzw. Vektoren. Anstatt nach einzelnen Wörtern zu suchen, werden sowohl die Wörter im Text als auch die Chatfrage in Vektoren umgewandelt. Durch diesen Ansatz kann das System Bedeutungen statt Wörter suchen, was zu präziseren Ergebnissen führt.

Suche mit Kosinusabstand und Weaviate

Das Auffinden von passenden Textstellen kann mit dem Kosinusabstand erfolgen, allerdings skaliert dieser Ansatz quadratisch, was bei größeren Datenmengen zu langsam und aufwendig wird. Daher nutzt schulKI Weaviate, eine Technologie, die Heuristiken verwendet, um große Datenmengen schnell und effizient zu durchsuchen – beispielsweise kann es die gesamte Wikipedia in nur wenigen Millisekunden durchsuchen.

Ausblick und Nutzungsmöglichkeiten

Wir bei schulKI arbeiten ständig daran, spannende Wissensquellen zu finden und vorgefertigte Lernumgebungen für euch bereitzustellen. Während wir diese Ressourcen entwickeln, möchten wir euch ermutigen, bereits jetzt eure eigenen PDFs hochzuladen und sofort mit der Nutzung von ChatGPT und personalisierten Inhalten für euer Lernen loszulegen. Lasst uns gemeinsam das Potenzial dieser innovativen Technologie ausschöpfen!