房屋可否还能要回

各位律师你们好，我是天津这边的农民，8年前，同村有一户人因为家庭问题临时住了我们家的老房，因为关系不错就让他们一直住着，当时还没有现在中国这种房屋厉害关系，本来我在村子就经常帮助朋友。也没想太多就本着帮他一把先让他们住下了。土地使用权证也在老房里。
后来我小儿子大学毕业从外地读书回来，想住回老房子，他就以占据土地使用权证为由，一直不肯搬出。现在事情我不知道怎么办好。我是在农村，我们这个地方还没有和拆迁有什么关系，因为里市区还是比较远。另外我老房子是我老父亲去世后留下的，土地使用权证上是我老父亲的名字。我还有两个亲弟弟现在也想帮着我要回这房子，我们这儿从来就没有房产证，不知道我还能要回这房子吗，是不是要给他补偿什么？
还有一点：我想问土地使用证上面只有个土地编号，没有具体地址编号，是不是去法院上也不好说明我的老房子位置。因为我们村子到现在还没有完全弄那个门牌号。
补充提问：
那需要给他补偿什么吗，去年他们在我们老房东西两面还盖了4小间平房，为这个我和他说不要盖，他不听我的关系都闹的很僵了