我在16年借了贷款公司的钱，合同上写的5万四，到我卡里就剩40000.还了5期之后因为工资原因有了逾期，该公司雇佣催收公司对我进行暴力催收，发短信给我的朋友亲戚侮辱我，我与父母只能答应催收公司的要求，分了两次还了两万多，之后有两年这个公司没有给我打个电话，让我觉得解决了。开始给我打电话，让我在还40500多块钱，并且在谈判无果的情况下，打电话到我单位诬告我，说我利用关系骗取他的钱。打电话给我老婆说我和她发生关系，把她整怀孕了，打电话到我弟弟的公司骚扰。总之以各种方式对我进行诽谤侮辱。让我和我妻子的关系破裂，并遭到单位的怀疑，怀疑我利用职务之便收取钱财，害的我弟弟对我失望。请问这样的情况该怎么处