赵王被废后，这座宅子便被赐给了王贤，当然其中的亲王规制要降为公爵规制，大内的工匠忙活了大半年，才将这座亲王府改造成公爵府。说是降格，但不过只是门上的金钉数目减少、墙上的琉璃瓦颜色改变、宫殿的牌匾撤掉而已……整座府邸的大小没有变，房间没有少，里面的一花一木、一窗一阁都没有任何改变。