赡养是怎么规定的

我父母在我18岁那年 离婚。离婚的时候，我的抚养费是归我爸出，我也是判给我爸。但是后来他娶了个小老婆，对我不好，我就出去跟我妈了。后来还因为抚养费的事，跟我爸打过官司。但是他始终是一分钱都没出。还装穷，博取别人的同情（他没有固定的工作，他是做小工程的）我知道他一直都有钱，但是就是没有机会抓住他。我跟我弟都是判给他的，后来因为他对我弟也不好，我跟他谈判（只是我跟他），只要他对我弟好，法院判给我的那份钱我就不要了。他答应了，可是后来对我弟还是不好。我奶奶说这样闹下去，以后对我弟的身心健康不利，所以这么久都没有再跟我爸有什么冲突。当时他离婚的时候说，今后跟我断绝父女关系。现在事情过去几年了。这几年中，他的一分钱我也没有用，也没有跟他说过一句话（我们那个小区的人都知道）。然后现在我参加工作，他也老了，家里人就想要我跟我爸和好，以后给他养老送终。我拒绝了。离婚这么多年，他从来没有跟我说过一句话，甚至还在他跟我妈，离婚之前，因为外遇的原因打过我。我想问，这种情况下，以后我要负赡养权不？
补充提问：
但是他并没有对我负抚养权啊。小的时候都是我妈在照顾我。只是那个时候他们还没有离婚。长大了，离婚后，也还是没有付我的学杂费。他该对我负的责任，都没有负。