Trước khi mất, cụ Vương đã có di chúc hiến Vân Đường phủ và bộ sưu tập đồ cổ cho Nhà nước, với 849 cổ vật và hy vọng thành lập một bảo tàng mang tên ông. Tuy nhiên, hơn 20 năm sau, phía gia đình cụ Vương và chính quyền vẫn chưa thống nhất được phương án đền bù, tôn tạo, trong khi căn nhà thì càng trở nên xuống cấp, hư hại nghiêm trọng.