提起辜振甫，很多人都會想到辜家在鹿港的舊宅，現在是著名的鹿港民俗文物館，在辜振甫過世後，就有遊客特地來到這裡參觀，也算是向辜老表達緬懷之意。
採西方文藝復興跟巴洛克建築風格的辜家舊宅，是辜振甫父親辜顯榮當年興建的豪宅，典雅華麗的外觀，讓遊客看過一眼就忘不了，走進室內，將近20間展覽室，展出清朝中葉到民初的生活器具、傢俱、書畫等用品，還有辜振甫跟父親辜顯榮栩栩如生的油畫像。
辜老過世後，遊客特地造訪辜家舊宅，緬懷故人。參觀民眾：「辜家也算是做了很多對社會有貢獻的事，我們鹿港人的驕傲，出了這樣一位好人。」
大門深鎖的古樓，是辜振甫小時候從台北回鹿港時居住玩耍的地方，如今只能透過琉璃窗，懷想當年情景，特別值得一提的是，這座耀星樓是文物館整建時，辜老紀念父親親手題的匾額。前鹿港鎮長李棟樑：「特別用他父親的字號耀星來命名，稱為耀星樓。」
辜振甫在民國62年，捐出舊宅改建為鹿港民俗文物館，並經常舉辦藝文活動，讓世人透過各項展演，更了解早期台灣生活狀況，如今斯人已乘黃鶴去，此地空餘古樓，讓參觀民眾更有無限追思。
