我是一名买团购房的,属于买方和卖方的中间人。近期一名女士看重我手里的一套房子,通过我与房主见面。并以口头协议定下了买这套房子说回家取钱一个星期后来买,而且嘱咐房主别卖给别人。房主答应后,买房者给了我5000元作为佣金,我打了一个收到5000元佣金的收条。我为了他这件事跑了整整一个星期,现在她单反面毁约,说不买了。要我把佣金退给他,我不同意,他报警说我诈骗。警察不管这方面的事,说给协调,我同意走法律程序,因为我觉得我付出了辛苦,还耽误房主卖房子了,请问应该退她钱吗?。
未面谈及查看证据材料,律师回答仅供参考。