脳性麻痺の難聴者に困っています

私と同じアパートに脳性麻痺の難聴者が住んでいるのですが、私はいつも彼に困らされています。
いいえ、私だけでなく他の住人たちも困っているのです。
彼は独身なのですが、いつも夜遅くまで「おめこ」とか猥褻な言葉を大声で叫んでいるのです。
それだけでなく、いきなり変な喚き声を出したり一人で大笑いしたりするのです。私共のアパートは
築年数がたっているので遮音性も優れていないのでよく響きます。
ある日、たまりかねて、彼が出勤するときに呼び止めたのですが、「俺が何を叫んだっていうんだ？
言ってみろ」と私が言えないのをいいことに逆に挑発してくるんです。
私も夫も子供も最近ノイローゼ気味になっております。
ある日インターネットをやっているとこんなサイトを見つけたので藁にすがる思いで書き込みました。
どうか、こんな私にいいアドバイスをして下さい！よろしくお願いします！