Wenn es nicht viele sind, hilft Wasser. Das mögen sie garnicht.
In eine Sprühflasche Wasser rein und die Wespe ansprühen. Evt. auch mehrmals. (Muss man bissl probieren)
Und/oder mit einem Buch etc. sanft nach draußen befördern.
Das funktioniert tatsächlich (Blumensprüher etc,). Die Wespen denken angeblich, es regnet und fliegen heim. Versuch ist es wert.
Vor töten wird gewarnt. Angeblich warnen sterbende Wespen andere, die dann besonders aggressiv reagieren. Inwieweit das stimmt (oder nur Mythen sind), keine Ahnung.