现在那个赌输的人不还钱，庄家要来向我这个中间人拿钱应该怎么办？之前那个赌输的人还了他一部分钱然后就不还了。