＝＝無職だけど部屋借りれますか？part2＝＝

アパートから立ち退きました。そのとき、立ち退き期限の数日前まで
次の住居を決めなかったので、業を煮やした不動産屋さん（Ａ不動産とします）
主導で（僕もいろいろ物件を調べていたのですが、強引な消去法で）現在
入居しているアパートを借りました。
このアパートには、Ａ不動産と付き合いのある建設業の人（遊び人の男性）の
紹介で入りました。 その建設業の人は最初は、２年の定期貸借契約だが継続も
できるかもしれないよ、と言ってました。
ただ家主（お婆さん）が、お金への執着が強い方のようで、契約の条件については
「敷金礼金は２、２で」 「世間で定期の家賃は安くといっても、私には関係ない」
と交渉時に言われ、（地域の相場で）定期でない一般契約に準ずる代金を払って
いると思います。

ところが先日家主のお婆さんが、他の入居者としゃべっているのが漏れ聞こえ、
「この人（僕のこと）とはワタシ、しゃべりたくない」
「２年の辛抱だから」 「（僕について）お宅、引きこもりだね」
などと言ってるのが聞こえてきました。 アパートの建て直しの有無にかかわらず、
２年で僕には出て行ってもらうというつもりになったようです。
僕としては、建て直しの計画がないかぎり住み続けられるという予想で入居したし
だからお金もいっぱい払ったのですが、やはり契約が定期２年なら出て行かなきゃ
ダメでしょうか。 あるいは敷金、礼金の一部返還や、家賃の減額等、地域での
一般的な短期契約での賃貸への減額を求める、法的な権利もないですか？