武功侯府并不在勋贵人家聚居的南坊或者东坊，而是挤在了平民百姓住的北坊。

侯府的宅子原是荣国公府，荣国公传五世，与族中宁国公比邻而居，两处国公府占了一条街，宅子极大。

后来两位国公的后人出了不肖子孙，连带着国公爵位被削，家产被抄没，族人获罪入狱，这两处宅子便空了下来。

圣上登位之后，不忍两处宅子荒芜，就将两处国公府一分为五，分赐给五位亲近大臣居住，武功侯便是其中一位，因为大小也是个侯爷，便住了荣国公府正路，占了最大最好的一处园子。