交往期间我向对方转款有一部分，对方向我转款也有，但对方转款为抚养费，现对方要回抚养费部分，我向法院提出我给对方也转了很多，但对方说他向我索要的是孩子的抚养费，与我给他转的钱款没有关联性，这种情况怎么办？

他已婚，在与我交往期间隐瞒已婚事实，本人怀孕时多次威胁以及恐吓不可以打掉孩子，（有聊天记录证明，）并承诺尽快结婚，在此期间基本每天跟我在一起，后面知道他已婚，但孩子已经有了，本人多次拒绝继续交往（有聊天记录）但在孩子出生时以及出生后，对方共计转款41000元，现在对方起诉我返还41000元，但在交往期间我向对方多次转款有43000元，现本人不想向对方返还这41000元，本人提出我也向对方转过43000元，金额高于对方，不应该再向对方支付这41000元，但对方说两者金额没有关联性，现要求我返还，这种情况怎么办？