家・建物の名義変更をする際は、家屋番号などで特定して法務局に申請します。

一般的に家・建物の家屋番号は、地番と同じであるか、地番に枝番が付いたものであることが多いです（古い建物の場合は一致しないこともあります）。また、地番と同様に、住所（住居表示）とは一致しないことが多いです。

したがって、土地と同様に、通常は納税通知書や登記済権利証を見て確認します。物件を複数持っていた方が亡くなり、相続人が細かく把握していない場合は、状況により名寄帳を取得します（最低限、○○県○○市などの所在がわかれば調査可能です）。

名寄帳については、上記土地の地番の調べ方をご参照ください。

また法務局で調査する場合は、ブルーマップという地図が置いてあり、住居表示から地番を調べることができるので、底地上の建物の登記簿謄本をすべて取得したいと受付窓口で伝えれば取得できると思います。