赡养该有谁

有一个80多岁的老人，生有六个儿子，老大，老二，老三（已故），老四（患有肝癌中晚期），老五（患有肝病），老六。老人原本有房产和土地，年轻时候出国赚过钱，土地政府征用后，房产归老六，钱财归老大。老二老三和老四，没有拿过老人的一分钱，老四家更是跟老人老死不相往来20年。现在老人老了，老大和老六不想在赡养老人了，还把事情弄到了村委会（村书记是老六家的亲姐夫）要求老二老三老四出钱赡养老人。请问老人该不该由老二老三老四老五赡养？