迷惑隣人を撃退しる！

うちの２階上にボケ老婆が住んでます。
昼間になると近所を徘徊しだして、
今日もうちのドアを開くはずのない鍵で頑張って開けようとしていました。
ようやく開かないと分かると窓を開けようとしたり…、
こないだは「中華料理とりたいから○○さんお金払ってくださらない？
あとで取りにくるから」とか分けの分からんことを言われました。
(もちろん無視)
最近徘徊しなくなっていましたが今日また活動し始めたようです。
俺がうちの人に「今度来たら警察に突き出してやる！」
と息巻いても、うちの人は及び腰。
他の家も迷惑しているようですが、
爺さん、婆さんが多い公営住宅ということもあって、
その家の人に文句はほとんどいっていないようです。
しかし異常な婆さんですからエスカレートして火をつけるかもしれません。
事が起こってからでは遅いと思うのです。
何か上手い対処法はないでしょうか？