这样违法吗

之前有个人追我，一直跟着我逛街，又一次抢着给我付钱，大概大几百，后来约了他出来，把钱还给他，他不要，我还是还了，后来他又和我出去逛街，我不要某商品，他要给我买，最后买了我也没办法，但是我一直不觉得我和他合适，就和他提出别联系，他就开始找人，说我花他钱，可是事实出去一般都是我自己付钱，包括吃饭等，后来他找我，提到上次买的东西，要我支付现金，我知道他刷的是信用卡，我认为这就是变相套现，我不愿意，我说东西没用，还你好了，钱，不可能给，他说会拿着我身份证等去找人来找我，威胁我，短信都保存好的，请问接下来我要怎么做？
补充提问：
如果他真做出什么出格的事情，是否我可以用法律保护我。