Nabend zusammen,
ich habe hier im Forum einen Workaround für mich gefunden, der gut funktioniert:
Unter Team-Optionen habe ich zusätzlich definiert, dass durch “joinempty=unavailable” bei nicht erreichbaren Agenten kein Eintritt in die WS erfolgt. Definiert wird der Wert so:
unavailable: applies primarily to agent channels; if the agent is not logged in but is a member of the queue, it is considered unavailable.
Also genau das wonach ich gesucht hatte. Die Agenten werden zwar noch als aktive Member angezeigt (unschön für die andere Agenten), aber es versauert ein Anrufer mehr in der WS wenn alle im Feierabend sind 
Trotzdem Danke nochmal für die Hilfe!