房屋买卖，签订的三方合同里面，规定所有费用都是买家出，包括中介费；但是中介私自提高卖价，多收了买家两万，然后让我签了一份付给中介两万的中介费协议，当时很急就签了，现在想想不对劲，感觉被骗了，我是否可以不交这两万呢？感觉中介费协议和三方合同冲突了。现在要过户了，中介要我先去交钱，才能过户。