私自反悔协议，我们该怎么办？

我处在云南曲靖农村，乡村道路狭窄，为改善出行，我们六家特向同村村民魏某出资4000元购买一长20米，宽2米的空地拓宽道路，并签订了协议，违者罚款十万，签字画押加盖手印六家各持一份。最近，魏某由于民事纠纷和六家中的方某发生了吵闹，并大打出手。为此，魏某想退款毁约，毁约不成，便封闭了当时购买的空地，他也不想履行协议中的处罚条约。经村民委员会调解无效，魏某夫妻并于无赖加泼妇的行为威慑我们。我们六家不想事情闹大，特向律师求招，怎样利用法律讨回我们的权利，具体程序该怎么办？