我交的房意向金，怎么办？

我在河北涿州，王玉芳。65岁
我在这里向你们咨询一下，一周前我在这里当地看房，当时看时初步觉的还行吧。房型，位直，价格等基本适合。因还需要进一步对该房有深入的了解，及回去再征求家里人的意见。可是当时售房人说，你现在交点现金一万到几万都行，就是为了给你保存你想要的那个房号，保证不会让别人挑走。仅起到这个作用。
当时也没多想，就交了一万元，书写了一个叫做‘’意向书‘
之后经了解有几处并不是先前自己打算的那样，有一定距离吧，还有家人有不同意见。在第2天我们就及时告知说我们不买了，要求返还意向金。
去了几次，都没给，倒没有说出什么理由。但不是很。。。总是找这个或那个理由推拖吧。所以我们现在搞不清楚那些所谓的‘说词‘是真或假，还是就不’想返还我们呢。因此，咨询一下律师先生哪位。谢谢