楚昭辅为人颇为吝啬，他把获赐的财物都积累起来，从不舍得乱花，晚年用来购置田宅。他曾经将这些赏赐的财物拿给同僚、朋友们展示，并表示自己虽然没立什么功劳，但既然得到这些财物就当做替国家保管了，以后再献给皇上。然而，后来他被罢免后，这些财物购置田宅了，当时人们就议论纷纷，说他是虚伪的小人。

　　楚昭辅虽然家财万贯，但的确很吝啬，他住的地方低下狭小，宋太宗看了以后想扩建其住宅，但楚昭辅不肯，赵光义对此很满意，于是赏了他一万两白金。

　　虽然楚昭辅很有钱，但也不是挥霍之人，唯一的爱好就是收藏鉴赏书画。家中收藏有李绪所画的马、韩滉画的牛、王维画的辋川样等。但随着楚昭辅的去世，这些书画也有所散佚。