你好!我买家私交了五千定金，由于某些原因，又不想买了，老板不肯退定金，想和商家商量用那五千定金在他店上买其它东西。老板也不肯，要他退一点定金也不肯，怎么办?才能要回一点定金。