盖房子还要往村委会交5000块钱

您好,我老家有一栋小楼。第一层是4间,第二层是三间的,剩下那一间是平房。现在把那间平房上边再盖一层,就是地下4间上边4间,看起来好看。但是盖到一半,村委会的来我家要钱,说盖房子得交5000块钱?他们无凭无据凭什么要我交钱?我有土地证和老房产证。他们这样做合法么?有哪项规定要交钱?以前别人盖不交钱,怎么现在来家里要钱?