回迁安置房在房屋户主于外地时被他人给住了，如何要回？

独居老人被定为拆迁户，离开当地到外地暂住等待回迁，辖区户籍警利用职权之便，于安置房竣工后的第一时间入住了。当年老人已被气病了。那时，不会也不知找哪个部门。直到老人去世了，也未住上新房，离休老人实在无力讨回本应属于自己的回迁安置房。后来，老人的家属得到一些实情，对违纪的侵权人进行举报，几年来，不给书面答复。电话答复却说让家属找法院解决。我的代理人——两地的律师到房管局都无法拿到房屋的回迁安置房的原始档案。异地打官司成本太大了。请给个注意吧。