Lösung
Das Problem ist gefunden, es ist so wie ich es vermutet hatte.
Bei mir liegt es an der Synchronisation.
Genauer an den Kontakten.
Ich habe das in den Bluetooth Einstellungen deaktiviert und schon funktioniert der Rest.
Den Apple Support habe ich auch mit ins Boot geholt, die kannten das Problem so noch nicht.
Wie geschrieben tritt das nur bei meinem iPhone 8 Plus auf.
Alle anderen Geräte funktionieren tadellos.