1983年には移情閣が兵庫県に寄贈され、翌1984年11月12日に「孫中山記念館」として開館した。明石海峡大橋の建設を機に移情閣移転の話が持ち上がったが、コンクリートブロック造3階建ての建築を移転することは建築基準法上不可能で、一時は取り壊しのうえ外観のみ復元という案も出た。1993年に建物が兵庫県の有形文化財に指定された。解体中であったことが幸いして、翌年1月の阪神・淡路大震災では被害をまぬがれた。