我借了别人2万元,当时说好3年还的,我也给了他利息,1年1千

我借了别人2万元,当时说好3年还的,我也给了他利息,1年1千元,第二年他就向我要钱, 我当时没有,他说把他的钱取出来的利息我算,我当时为了避免麻烦就答应了,过了些日子又来要 ,说不还了就翻倍的还,那么就是6万多元了,这个算不算敲诈,希望贵方给我个意见,现在他已经起诉我了,我该怎么办?谢谢。