今回のフレーズの着目ポイントは「過去表現の否定形」です。 

過去表現・否定形とも、それぞれ2語ずつで構成されていますが、この計4語の語順には、やはりルールがあります。 

そしてさらに修飾語も入っているので、ルールを覚えるよりはフレーズを丸ごと覚える方がラクかもしれません。 

一石二鳥どころか、一石三鳥以上のフレーズです。