山奥の集落

年配の方との会話中、山奥の集落のことを「部落」って言ったら一時会話が途切れた。
あとで考えたら、いわゆる部落の事を連想したんだと思うだけど
自分は「集落」の事を言ったつもりだし、一般的にも言うと思うんだけど、そんなもん？