根据您描述的情况,对方用手机作为抵押物向您借款,但在您交付款项后又将手机取回。这种行为本身并不一定构成犯罪,特别是如果双方之间的借款行为是基于真实意愿且没有其他非法因素的话。
然而,如果对方是在虚构事实、隐瞒真相的情况下骗取您的财物,或者使用欺诈手段让您陷入错误认识从而交付财物,那么这种情况可能涉嫌诈骗。在中国的法律体系中,诈骗罪通常是指以非法占有为目的,采用虚构事实或者隐瞒真相的方法,使被害人产生错误认识,从而作出财产处分的行为。
如果您认为自己遭受了诈骗,您可以通过报警的方式向公安机关报案,由警方进行调查。如果确实存在诈骗行为,根据《中华人民共和国刑法》第二百六十四条的规定,对方可能会被追究刑事责任。