2000年總統大選時，宋楚瑜為了展現自己的清廉和節儉，曾經說過自己母親的家窮得連廁所門壞了都沒錢修，這句話，一度成為對手揶揄的玩笑，就連宋楚瑜母親家的大門，還一度成為「熱門景點」；不過根據TVBS掌握的消息，宋楚瑜的母親，其實已經在過年前，低調搬離這棟「廁所連門都沒有」的官舍。
前立委林重謨(模仿)(2004.11.22)：「說到楚瑜的財產，楚瑜的心裡就很慚愧，楚瑜連母親廁所的門壞了，都沒有錢修理，楚瑜實在愧對我的母親。」
這段暗諷宋楚瑜母親，住在「門都沒有」的官舍裡，雖然已經是4年前的事，但木門依舊在，只是門裡住的人搬走了。TVBS記者徐沛緹：「宋楚瑜的母親，住在這棟由國防部配發的官舍，已經40多年了，不過，卻在今年的過年前，已經開始悄悄打包。」
低調的宋家，盡量不讓這個消息傳出去，但看到屋子二樓的走廊燈，大白天還亮著，門口信箱塞了傳單也沒有清，撕掉一半的小紙條，寫著信件投遞的新地址，很顯然屋子的主人已經搬走了。
其實當年，宋楚瑜的父親因為是將軍，所以住在國防部配發的官邸裡，但父親過世後，宋楚瑜的母親，卻面臨必須搬家的命運。國民黨立委劉文雄：「散居戶呢，他可以住到奶奶(宋楚瑜母親)不想住為止，這是政府的明文規定，這個掃地出門的這些動作，是非常不人道的。」
宋楚瑜母親打包走人，搬進國防部分配的新國宅，舊官舍也將交還國防部，這棟老宅院，現在不是「門都沒有」，而是「人去樓空」。
