房屋出租问题

我们家有一套闲置的楼房,租给别人做生意,去年的时候我们和一个承租人(甲)签订的合同,合同一共三年，合同中并没有任何与转租相关的条款。租金是一年一交,甲交给了我们第一年的租金,然后再第一年内,甲又将房子转租给了其他人(乙),而且在转租过程中,甲乙双方都没和我们家签订任何协议和合同,只是他两人之间签订了转租合同,今年11月份甲交的一年房租到期,甲也不打算再租,乙现在想和我们续签合同,但是我们不想和乙签,因为乙续签后也不打算自己用,还是打算转租出去,我们嫌太麻烦就不想租了,我想问问这种情况下我们和不可以单方面决定不和乙签订合同。求帮助。