■スレッド立てるまでもない質問スレッド Part101◆

Whoever calls on you , don't answer.誰があなたを訪問しても、返事をしてはいけない
この文でWhoever callsがdon't answerを副詞節で修飾していると言うのですが、どうしてそうなるのかが分かりません。
副詞は動詞を後ろから修飾するはずなので一番前にあるWhoever callsが修飾する事はできないと思うのですが・・・