多少土地，只要万贵妃去跟皇帝说上两句，多大的田地财产都赐给了他家。这回万家又透过万贵妃去求请武强、武邑两地六百余顷的田地，皇帝还未准许，他们便出手强夺了过来，还烧毁了不少民房，打死了几个反抗的农民。
这件事情自已被万家压了下来，没有人敢禀报皇帝。楚瀚在暗中对汪直道：“天下权柄，毕竟掌握在万岁爷手中。万家现在势力虽大，但终究不能盖过了皇帝。依我猜测，皇帝虽宠爱昭德，对昭德的两个兄弟却早已心有芥蒂，汪爷不如顺从皇帝的心意，早早将万家兄弟除去了，可是大功一件。”
汪直听了，颇以为然，便将万家强夺民田的事情密报给成化皇帝知道。成化皇帝老早就看不顺眼这兄弟俩既无能又奢侈，便以强夺民田之事斥责二人，勒令他们从内阁退休，革除官位，保留爵位。两兄弟在万贵妃的庇护下，虽仍在京中过着优渥富裕的生活，但实权已被剥夺一空。
另一个阁臣万安，因谄媚万贵妃得法，楚瀚一时扳他不倒。他仍留在阁臣之列，但始终未能担任首席内阁大学士，权力受到其他阁臣的制衡。
至于要如何对付梁芳，楚瀚倒是煞费心思。他虽对将自己送去净身房的梁芳并无好感，但之后梁芳待他倒十分宽厚，又给他升官，又给他财宝