Hi Philipp, dein Setup mit Elevenlabs + GPT-4o ist an sich top, ich nutze es genauso auch.
Einer meiner besten Assistenten ist beispielsweise der hier:
https://www.youtube.com/watch?v=kemQrsJ1Wfk▾
(Latenz ist okay und Gespräch verläuft gut).
Könnte es sein, dass bei Dir das Model durch einen komplizierten Prompt etwas verwirrt ist, und deshalb eine hohe Latenz + keine guten Ergebnisse liefert?