Dacă mai ai probleme de genul poți folosi modul Incognito al browserului. Deschizi acolo site-ul după modificare.
La mine funcționează așa cu WP Super Cache.