Answers the phone
Connects to the Yeastar or SIP system the business already runs, so calls reach the agent on the numbers customers have always dialled.
Casestudy over een AI-spraakagent
Vocale
Een medewerker die de telefoon van een bedrijf beantwoordt, het antwoord in de eigen documenten van dat bedrijf vindt en het supportticket opent nog voordat de beller heeft opgehangen — via de nummers die het bedrijf al in bezit heeft, en op hun eigen hardware als ze dat willen.
- IndustrieInbound support and telephony
- GebruikersSupport teams on a Yeastar or SIP PBX
- DekkingEvery call, around the clock
- DienstenProduct Design, Development, AI
Overzicht
Vocale koppelt een AI-agent aan een telefoonlijn die een bedrijf al heeft. Een klant belt het nummer dat hij altijd al heeft gebeld; de agent neemt bij de eerste beltoon op, spreekt zijn taal, beantwoordt vragen op basis van de eigen handleidingen en het beleid van het bedrijf, en — wanneer het antwoord eigenlijk is "hier moet iemand naar kijken" — maakt hij een supportticket aan met de reeds verzamelde gegevens.
Er verandert niets aan het telefoonsysteem. Het bedrijf behoudt zijn provider, zijn nummers en zijn belabonnement; een Yeastar- of compatibel SIP-platform wordt eenmalig via een formulier aangesloten, waarna de trunk en de gespreksroutering daarachter worden ingesteld. Vervolgens hoef je alleen nog maar de documenten te uploaden die de agent moet kennen, de paar zinnen te schrijven die de toon aangeven, en het geheel in een browser te testen totdat het goed klinkt — en dat alles voordat er ook maar één echt gesprek naar de agent wordt doorgeschakeld.
Video
- Next.js 16
- TypeScript
- Tailwind CSS
- Supabase
- PostgreSQL
- LiveKit
- WebRTC
- SIP telephony
- OpenAI gpt-realtime
- Python
- FastAPI
- Redis
- Pinecone
- Docker
- Next.js 16
- TypeScript
- Tailwind CSS
- Supabase
- PostgreSQL
- LiveKit
- WebRTC
- SIP telephony
- OpenAI gpt-realtime
- Python
- FastAPI
- Redis
- Pinecone
- Docker
Key capabilities
Grounded in your documents
Manuals, policies and price lists are uploaded, indexed and searched at the moment of the question so the answer comes from the business's own material rather than the model's memory.
Opens tickets mid-call
When a caller needs a person, the agent gathers the subject, the contact and the urgency while it still has them on the line, then files the ticket itself.
Knows who is calling
An existing customer database connects read-only, so an inbound number is matched to an account before the agent says a word.
Two engines, one product
The same agent runs on a hosted model API or entirely on a private GPU. The business picks on cost and on where its data is allowed to go.
Een hulplijn is slechts zo beschikbaar als de mensen die de telefoontjes beantwoorden, en de vragen die binnenkomen zijn vrijwel altijd dezelfde paar: wat zijn jullie openingstijden, wordt dit vergoed, hoe kan ik het resetten? De antwoorden staan al opgeschreven – in een handleiding, een beleid, een prijslijst – maar niet op een plek waar een beller erbij kan en een medewerker ze kan vinden terwijl iemand in de wacht staat. Door een AI in te zetten, is de beschikbaarheid voor de helft opgelost. Door er een per minuut te huren, wordt dit stilletjes vervangen door een kostenprobleem, want hoe beter het werkt, hoe vaker het wordt gebruikt, en hoe meer het elke maand kost.
Telefoontjes buiten kantooruren
’s Avonds, in het weekend en op feestdagen wordt de oproep doorgeschakeld naar de voicemail — en wat daar terechtkomt, zijn meestal de standaardvragen die iemand binnen een minuut zou hebben afgehandeld.
Antwoorden die niemand kan vinden
De informatie staat wel in documenten, maar niet in een vorm die iemand kan raadplegen terwijl er een beller in de wacht staat.
Prijs per minuut
Bij beheerde spraak-AI-platforms wordt per gespreksminuut gefactureerd, waardoor de kosten stijgen naarmate het gebruik toeneemt — een verkeerde prikkel om een helpdesk op te zetten.
Vocale fungeert als schakel tussen het telefoonsysteem van een bedrijf en zijn kennisbestand. De PBX wordt via een formulier gekoppeld en de routering wordt daarachter ingesteld. Documenten worden geüpload en geïndexeerd. De manier waarop de agent reageert, wordt in gewone taal gedefinieerd in plaats van in code, en het geheel kan in een browser worden getest voordat er een echt gesprek binnenkomt. Zodra het systeem live is, wordt alles wat het heeft gedaan vastgelegd – het transcript, de zoekopdrachten die het heeft uitgevoerd, de tickets die het heeft aangemaakt – zodat het team kan beoordelen of het zijn werk goed doet, voordat het meer taken krijgt toevertrouwd.
Wordt aangesloten op de PBX, niet eromheen
Yeastar en compatibele SIP-systemen worden via een formulier aangemeld, en het bedrijf behoudt zijn provider, zijn nummers en zijn belabonnement.
Ophalen voordat het spreekt
Een vraag waarvoor een feit nodig is, leidt tot een zoekopdracht in de geïndexeerde documenten, en het antwoord wordt samengesteld uit de gevonden resultaten — waarbij ‘niets gevonden’ ook een antwoord is dat de agent mag geven.
Gehost of zelf gehost, hetzelfde gedrag
Spraak, taal en stem worden verwerkt via een API van een derde partij of op een eigen GPU. Het wisselen tussen deze twee opties is een kwestie van configuratie, geen hercompilatie.
UX researchFeb–Mar
MVPApr–Jul
OperationAug–Sep
DiscoveryFeb
ArchitectureMar
UI designApr–May
Backend and local AIMay–Jul
TestingJul–Aug
OperationAug–Sep
Test het voordat een klant het doet
A sandbox that runs the whole pipeline in the browser. Pick a caller, start the call, and the transcript arrives live beside it as the agent hears and answers. Every session it has ever handled, browser or phone, inbound or outbound, is one click away in the rail on the left.
De documenten waarop het betrekking heeft
Files are dropped straight onto the page, then parsed, split and indexed. Each row reports how many pages went in and how many searchable pieces came out, so it is obvious at a glance when a document is ready to be quoted on a call and when it is still being worked on.
Wat het niet kon beantwoorden, wordt een ticket
The agent collects the subject, the customer and the urgency while the caller is still on the line and files the ticket itself, transcript attached. Support opens the queue to a list of real problems in the caller's own words instead of a column of missed calls.
Het weet wie er belt
An existing customer database connects read-only, with a mapping step for whichever columns hold the name and the number. From then on an inbound call is matched against it before the agent speaks, and the records stay where they are. Vocale reads them; it does not become the place they live.
Nummers, toegewezen via de console
Telephony is the one part a business should not have to get right alone, so provisioning is an operator job rather than a self-service form. Each number is registered, pointed at an organisation, and switched on from here, which doubles as the fastest way to see which tenants are actually taking calls.
Wat elke minuut kost
Spend is metered the way the models bill it: caller speech, agent speech, and replayed history, broken out per model and per organisation. It is what turns the choice between a hosted API and a private GPU into a decision with a number attached rather than an argument.
Waar het bij een helpdesk om draait, is niet de abstracte nauwkeurigheid — het gaat erom of de oproep werd beantwoord en of het antwoord juist was. Vocale beantwoordt alle vragen, op elk uur van de dag, in de taal van de beller, en laat een transcript achter zodat de tweede vraag kan worden beantwoord. De onderstaande kosten zijn wat het platform gedurende een maand aan daadwerkelijke gesprekken in rekening heeft gebracht op het gehoste niveau; bij het zelfgehoste niveau wordt die lijn verplaatst naar hardware waarvoor het bedrijf al betaalt, en blijft het bedrag per minuut volledig stabiel.
- 24/7
- Telefoonbereikbaarheid, zonder dienstrooster en zonder wachtrij
- $0.06
- Kosten per gespreksminuut op basis van verbruik, gehost pakket
- 6
- Talen waarnaar de agent kan worden omgeschakeld
- 2
- Mogelijkheden: gehoste API of eigen GPU
User goal
- Caller dials in
- The agent answers
- Looks up the customer
- Searches the documents
- Opens a support ticket
- Emails it
Interface & channels
- Yeastar PBXPhone calls, bridged into LiveKit over SIP
- livekit-clientVoice testing in the browser
- NodemailerTicket emails, sent over SMTP
- User and admin portals
- Next.js 16
- React 19.2
- React Compiler
- TypeScript 5
- Tailwind CSS v4
- shadcn/ui
- Radix UI
- Framer Motion
- TanStack Query v5
- React Hook Form
- Zod v4
- EN / IT
- next-themes
- sonner
- cmdk
- lucide
- react-pdf
- md-editor
- lamejs
- pnpm
Planning & orchestration
- LiveKit Agents 1.6The agent worker behind every call
- Ticket flowA state machine of our own, from first question to sent ticket
- PydanticTyped orchestration models
- Silero VADTurn-taking, with LiveKit's turn detector
- Session gateCall caps per organisation and across the system
- StreamlitA scenario lab, for testing only
Memory & context
- RedisShort-term memory: a sliding window of the last 15 turns
- SupabaseLong-term memory: every turn of every conversation
- Tenant presetsConfiguration and presets for each organisation
- RAG plane
- Supabase StorageThe source documents
- pymupdf4llmPDF to Markdown
- ChunkerSplit on headers, then about 500 tokens with 50 overlapping
- multilingual-e5-largeEmbeddings, through Pinecone Inference
- PineconeA serverless vector index
- bge-reranker-v2-m3Reranks to the best 5, above a 0.20 threshold
- RedisIndexing jobs and their progress
- FastAPIThe retrieval API, served by Uvicorn
Models
- gpt-realtime-2.1Speech to speech: listening, reasoning and speaking in one model
- gpt-realtime-2.1-miniThe lighter realtime model
- gpt-4o-mini-transcribeTranscripts of what the caller said
- Legacy GPU pipeline, kept for rollback
- faster-whisperSpeech to text
- vLLMServing Qwen2.5-VL-7B-AWQ
- Piper and Kokoro-82MText to speech
Tools & actions
Functions the agent calls while the caller is still on the line.
- search_knowledge_baseAnswers from the documents, through RAG
- lookup_customer_detailsFinds the caller in the customer's own MySQL
- search_customer_identityConfirms who is calling
- Ticket toolsCreate, update and submit the ticket
- update_ticket_draftKeeps the draft and the contact details current
- end_callEnds the call cleanly
- Call recordingPCM to WAV, with FFmpeg
State & data
- PostgreSQL 17.6Supabase, self-hosted in Docker, across 47 migrations
- SupabaseAuth, and storage for documents and recordings
- KongThe API gateway, with Supabase Studio
- Redis 7Three instances: LiveKit, agent memory and RAG jobs
- PineconeThe vectors
- MySQLEach customer's own database, outside the system
- Customer Data PlaneFastAPI, with a pooled PyMySQL connection to each customer
Observability, safety & evals
- Cost meteringCost per call and per organisation, from usage and model pricing
- Resilience metricsSelf-repeats, talk-over, false barge-ins and latency
- Admin dashboardsMonitor, agent state, agent activity and database logs
- journaldFile logs, with systemd alerts on failure
- pytest26 test modules, a replay harness, and a transcript judge across 5 regression classes
- Call scenariosWritten in YAML, and replayed against the agent
- Agent safetyA leaked-reasoning detector, privacy and email read-back rules, an inactivity watchdog
Security
- NextAuth v5Credentials sign-in, bcrypt hashes, a 24-hour JWT in a secure cookie, email verification
- Access controlRoute guards, admin authorisation, and row-level security on Supabase
- AES-256-GCMCustomer database passwords encrypted at rest, readable from Node and Python
- Service keysAPI keys between services, and a secret for scheduled jobs
- Rate limitingOn every sign-in route
- Security headersCSP, HSTS with preload, no framing, and the microphone for this site only
- Private networkThe calling stack reachable only over VPN, and an allowlist on the SIP trunk
- WireGuardOne outbound IP for customers to allow into their MySQL
Deployment
- Ubuntu 24.04One self-hosted server, behind the VPN
- NGINXTLS, and one domain for both portals and Supabase
- systemdBoth portals, the agent worker, and a ticket email timer every 2 minutes
- Docker ComposeSupabase, LiveKit and SIP, RAG and customer data, on one shared network
- supervisordThe media plane container
- Vast.aiThe GPU box from the vLLM era
Wat een bedrijf via het dashboard kan doen
Zeven werkgebieden achter één aanmelding. Telefonie en kennis worden eenmalig ingesteld; de dagelijkse gang van zaken bestaat uit operationele taken, ticketverwerking en klantgegevens. Anatomie van een enkele spreekbeurt
Invoer en uitvoer in één keer — waarbij beide delen direct worden vastgelegd terwijl ze plaatsvinden. Op het zelfgehoste niveau is elke box binnen de agent een model dat op de eigen GPU van het bedrijf draait.
Midden in een zin onderbroken worden
Solution: Bellers onderbreken het antwoord zodra ze het hebben begrepen, en een medewerker die gewoon doorpraat, klinkt onnatuurlijk. Met spraakdetectie wordt het uitgaande geluid onderbroken zodra de beller iets zegt, waarna de tekst van de medewerker wordt ingekort tot wat er daadwerkelijk is gehoord — zodat het gesprek verdergaat op basis van het gesprek dat de beller heeft gevoerd, in plaats van het gesprek dat het systeem had gepland.
Stilte terwijl het nadenkt
Solution: Het doorzoeken van de documenten duurt net zo lang als het luisteren naar een verbroken telefoongesprek. De medewerker zegt na een halve seconde een korte, natuurlijke opvulzin en breekt die af zodra de zoekopdracht resultaat oplevert, waardoor er voldoende tijd is voor het ophalen van de informatie zonder dat er een stilte ontstaat.
Tekst die niet wordt voorgelezen
Solution: Tekst die voor het scherm is geschreven, is niet geschreven om te worden voorgelezen: geldbedragen, datums in cijfers, afkortingen. Een normalisatielaag zet bedragen, datums, tijden en afkortingen per taal om in hun gesproken vorm, voordat ze het spraakmodel bereiken.
Eén GPU, meerdere gesprekken
Solution: Bij een live spraaksessie worden de modellen in het videogeheugen opgeslagen, waardoor de capaciteit wordt beperkt door het VRAM en niet door de ruwe rekenkracht. Sessies worden per kaart toegewezen en de werklast wordt expliciet over de kaarten verdeeld — als men de standaardpooling laat werken, komen spraak- en taalverwerking op dezelfde GPU terecht en belemmeren ze elkaar.
Vragen
Nee. Vocale sluit aan op het telefoonsysteem dat u al gebruikt — Yeastar en compatibele SIP-platforms — en de oproepen blijven binnenkomen op de nummers die uw klanten al hebben. De verbinding wordt eenmalig tot stand gebracht via het dashboard, waarna de trunk en de routering automatisch worden ingesteld.
Kies de manier die het beste bij u past. De agent draait zowel op een gehoste API, wat de snelste manier is om aan de slag te gaan, als volledig op een GPU die u zelf beheert, waarbij geen audio, transcripties of documenten uw infrastructuur verlaten. Het is een configuratiekeuze die geen invloed heeft op de mogelijkheden van de agent.
Het geeft antwoorden op basis van je documenten in plaats van uit het hoofd. Een vraag waarvoor een feit nodig is, leidt tot een zoekopdracht in alles wat je hebt geüpload, en het antwoord wordt samengesteld uit de gevonden fragmenten. Als er niets relevants wordt gevonden, is het juiste antwoord om dat te melden en aan te bieden een ticket aan te maken – en dat is ook het antwoord dat het geeft.
Het wordt doorgeschakeld. De medewerker noteert het onderwerp, de contactpersoon en de prioriteit terwijl de beller nog aan de lijn is, maakt een ticket aan in je wachtrij en voegt het gespreksverslag toe — zodat degene die het overneemt, kan voortbouwen op wat er daadwerkelijk is gezegd in plaats van op een verzoek om terug te bellen.
Gaan er na vijf uur telefoontjes verloren?
We zullen een medewerker met u in contact brengen.