Wie bekomme ich Wespen im Rolladenkasten wieder los?

Ich habe in letzter Zeit immer wieder Geräusche in meinem Rolladenkasten gehört. Vor allem nachts - es hat sich so nach einem Rascheln / Kratzen angehört. Auf dem Rolladensims lag dann immer wieder mal so kleine Körner, sah aus wie Styropor.
Seit ein paar Tagen fliegen nun vermehrt Wespen oder Bienen vor meinem Fenster und die krabbeln auch durch ein Loch außen am Rolladen in den Kasten. Was kann ich jetzt tun um die Biester wieder los zu werden? Die Geräusche werden nachts immer lauter. Ab und an hört man auch schon ein Summen / Surren. Was soll ich tun? Wer kann mir helfen?