「キャッシュ削除の有効化」設定状況を確認してください。それでも改善しない場合はサーバのキャッシュファイルを直接削除してください。
デフォルトの Amimoto AMI でお使いいただく場合はプラグインを有効化してください。
プラグインを有効化した状態で自動でキャッシュを削除する場合は「Nginx Cache」メニューよりキャッシュ設定画面を開き、「キャッシュ削除の有効化」で「Yes」を選択します。「No」の場合は自動でキャッシュが削除されません。
また、nginx の設定を書き換えている場合などは別途、proxy_cache_path と proxy_cache_key の設定が必要です。
Nginx Cache Controller の解説記事も併せてご参照ください。
上の作業を行ってもキャッシュの削除がされない場合は、Nginx Cache Controller プラグインを使ってもキャッシュの削除ができない場合 をご参考に、サーバからキャッシュの削除を行ってください。