三年前相亲结婚，没多久怀孕了，因为总是吵架，怀孕期间就住在娘家，产检都是自己一个人去，到生孩子也是我自己妈妈陪着我，生完之后因为喂奶乳腺坏了，就去就带的小孩去了外地亲戚那边治疗，期间也因为总是吵架，然后他又说很多威胁我不让我好过的话，我就在外地学习美容那些手艺，小孩一直都是我家带的，他就每个月给买奶粉和尿不湿的钱，一直处于异地状态，然后还总吵架，感情不和，三观也不一样，现在小孩三岁了，我想离婚，但是他就威胁我说离婚的话让我把彩礼钱还给他，还说让我等死之类的话，他们家从来没带过小孩，他也不同意离婚，沟通的结果每次都是还彩礼钱，小孩他也说不要，如果我上诉的话可以离掉么？需要返还彩礼么？