民事纠纷后问题不知如何处理，求帮忙

前几天，我和一名女性在地铁里打了起来，后来我被带到派出所做笔录，而那个女的说自己不舒服被打上了要求去医院做伤情鉴定。回来后那个女的和他父亲把医院开的鉴定报告拿给民警，上面写着胸部软组织挫伤，要我赔偿他们钱。我也被打伤了，但是轻微伤，我就没去医院做鉴定。后来我为了不想把事情闹大，就给了他们医药费600元，并有多给了400，共1000元。她和我在派出所签了协议书和收据，承诺这件事就此了结。可是这个女的昨天竟然来我公司要我赔他钱，说是还是不舒服开的药钱，我该怎么办呢。
补充提问：
请问应该收集那些证据？怎么收集啊？多谢帮忙。