Een bedrijf bouwt een chatbot die gebruikmaakt van privédocumenten. Ze moeten die documenten omzetten in vectorrepresentaties voordat ze deze opslaan. Welk type foundation model moeten ze gebruiken?

Een text embeddings model is ontworpen om tekst om te zetten in numerieke vectorrepresentaties (embeddings). Deze embeddings vangen de semantische betekenis van de tekst en maken het mogelijk om documenten te vergelijken op basis van inhoudelijke gelijkenis, wat essentieel is voor het ophalen van relevante informatie in een chatbot die privédocumenten gebruikt. Een text completion model genereert vervolgtekst, wat niet de primaire behoefte is voor het omzetten van documenten naar vectoren. Een instruction following model is geoptimaliseerd om instructies op te volgen en taken uit te voeren, maar converteert geen tekst naar embeddings. Een image generation model creëert afbeeldingen en is niet relevant voor tekstverwerking.