我今年3月5号跟房主钱签的合同,定金10万,这一个月帮他清尾款40万,3月20日找房主清尾款并网签时

我今年3月5号跟房主钱签的合同,定金10万,这一个月帮他清尾款40万,3月20日找房主清尾款并网签时房主要求涨钱,我答应加五万,但还是不去网签也不赔我双倍违约金,说没有钱赔我。现在找他就说按合同来,也拖着不网签或者解除合同,请问我何时起诉?合同签到4.12号,请问何时可以起诉他?