这种行为能不能构成诽谤罪

我是一名村支部书记，今年又该换届选举了。我村一名党员为了参选想当官，公然在大街上贴小字报污蔑我。请您帮我分析一下，他说的15000元能不能构成诽谤罪。我曾经就在党员、代表会上说过：他私建猪场我不同意，如果上级追查，我不负任何责任，出了问题她自己担着。（有个前提：他是私自在叫行地里盖的）
事实是，我没收他一分钱、没抽他一支烟。
现在我的名誉严重受损，严重影响我的参选。


村民你们好：
我是XX，我盖养殖厂是XXX同意的，这事村民都知道的。在我们村不用说是盖养殖厂，就是盖个小草屋子也需要XXX点头同意，村民盖房子上级不准收任何钱，只收房权证钱，然而XXX却收15000元，我盖养殖厂送钱少了你能同意我盖吗？
我欠村里的6000元钱，你当时说以后再说。今年我提出选举，你却公报私仇，搞出这一套来。咱们两个人之间的事，不要扯到参选上来，有什么事咱到村委去说，上午9点在村委大院对说，欢迎全体村民到场旁听。


X X

X年X月X日

注：XXX就是我的名字 XX就是这个党员的名字