集资房

公婆把点房权给我们后,我们交了部分房款并出钱装修了此房。谁知我们和公婆住进去后发生了矛盾,再加上其他兄弟姐妹的挑拨,公婆现在叫我们搬出去,我们管他们要钱他们又没有。不搬他们就四处找领导说我们强占他们的房子,还找媒体臭我们如何不孝顺。我们几十万花进去了,现在怎么办?