口头协议不是不受法律保护,但在举证方面可能会有一些麻烦。建议你先做一个电话录音,将你将房子租给对方的事实用录音行使固定下来。然后你可以给对方下一个限期腾退房屋的书面通知。因为你与对方的租赁房屋合同已经到期,固谈不上解除的问题,这属于自动到期合同终止。如果对方在限期内仍不腾退,则你只有启动诉讼程序,以对方侵犯你的房屋财产权为由起诉至法院,请求法院判决对方腾退房屋。