本来签协议当天买家要向我们付8万定金，但买家说只取了2万现金，剩下的6万第二天转账。我们心软，只好这样答应。但第二天买家突然说自己反悔了，房子不买了，另外还要向我们追回2万定金。真晕，签了协议后他单方面反悔，没向他要那6万定金就已经很好了，竟然还私底下威胁我们说要找人向我们要回这2万块。我和我老公都是脾气特好的人，不想惹一些社会上的小混混，请教一下现在要怎么办呢？
买方毁约不买，卖方有权扣留定金，如果闹事可以报警处理。
根据《担保法》第六章 定 金
第八十九条 当事人可以约定一方向对方给付定金作为债权的担保。债务人履行债务后，定金应当抵作价款或者收回。给付定金的一方不履行约定的债务的，无权要求返还定金；收受定金的一方不履行约定的债务的，应当双倍返还定金。
第九十条 定金应当以书面形式约定。当事人在定金合同中应当约定交付定金的期限。定金合同从实际交付定金之日起生效。
第九十一条 定金的数额由当事人约定，但不得超过主合同标的额的百分之二十。
扩展资料：
根据《担保法》
第一百一十五条 当事人约定以交付定金作为订立主合同担保的，给付定金的一方拒绝订立主合同的，无权要求返还定金；收受定金的一方拒绝订立合同的，应当双倍返还定金。
第一百一十六条 当事人约定以交付定金作为主合同成立或者生效要件的，给付定金的一方未支付定金，但主合同已经履行或者已经履行主要部分的，不影响主合同的成立或者生效。
第一百一十七条 定金交付后，交付定金的一方可以按照合同的约定以丧失定金为代价而解除主合同，收受定金的一方可以双倍返还定金为代价而解除主合同。对解除主合同后责任的处理，适用《中华人民共和国合同法》的规定。
第一百一十八条 当事人交付留置金、担保金、保证金、订约金、押金或者订金等，但没有约定定金性质的，当事人主张定金权利的，人民法院不予支持。
第一百一十九条 实际交付的定金数额多于或者少于约定数额，视为变更定金合同；收受定金一方提出异议并拒绝接受定金的，定金合同不生效。
第一百二十条 因当事人一方迟延履行或者其他违约行为，致使合同目的不能实现，可以适用定金罚则。但法律另有规定或者当事人另有约定的除外。
当事人一方不完全履行合同的，应当按照未履行部分所占合同约定内容的比例，适用定金罚则。
有在中介的见证下签房屋买卖协议，协议上规定，说如果买方中途悔约，卖方已收取的定金不予退还，应退还买方所支付的购房款。如果卖方中途悔约，要三日内退还买方所支付购房款，同时向买方支付相当于双倍定金的违约金。
其实协议上关于悔约的规定，反而对卖方的限制还更多些。
那你是硬道理了，你可以不要理会买者了。到时他们会主动找你协商的。