可以拒绝缴纳，应该土地出让金本来就应该买方缴纳。除非你们合同约定啦有你缴纳，如果没有约定，就是买方交。
1.什么是土地出让金：土地出让金是指各级政府土地管理部门将土地使用权出让给土地使用者，按规定向受让人收取的土地出让的全部价款(指土地出让的交易总额)，或土地使用期满，土地使用者需要续期而向土地管理部门缴纳的续期土地出让价款，或原通过行政划拨获得土地使用权的土地使用者，将土地使用权有偿转让、出租、抵押、作价入股和投资，按规定补交的土地出让价款。土地出让金不是简单的地价。对于住宅等**，采用招标、拍卖的方式，可通过市场定价，土地出让金就是地价。可是对于经济适用房、廉租房、配套房等**，以及开发园区等工业**，往往不是依靠完全的市场调节，土地出让金就带有税费的性质，是定价。
2.土地出让金的分类与计算土地出让金根据批租地块的条件，可以分为以下两种：一种是熟地价，即提供七通一平的地块，出让金包括土地使用费和开发费;另一种是毛地或生地价，即未完成七通一平的地块，出让金仅为土地有偿使用的部分，投资者需自行或委托开发公司进行受让土地的开发工作。例如上海北京东路71号地块面积为2.38万平方米，有20多家单位和1000多户居民，新加坡长立国际开发公司与上海黄浦资产经营公司以460万美元的毛地价获得50年的使用权，并投资5300万美元。旧区的动迁和市政配套费用一般要占到熟地总价的50-70%左右。土地出让金又可分为地面价与楼面价两种计算方法，地面价为每平方米土地的单价，即以出让金总额除以土地总面积;楼面价为摊到每平方米建筑面积的地价，即以出让金总额除以规划允许建造的总建筑面积。投资者往往以楼面价来计算投资效益。因为地面价不能反映出土地成本的高低，只有把地价分摊到每平方建筑面积上去核算，才有可比性，也易于估算投资成本，进行估算投资效益。一般认为建高层可摊属地价，实际上并非如此。因为土地出让金是按建筑面积计收的。土地出让金的支付方式，如果是外商投资或中资企业开发外销房的，要以外汇支付，如是中资企业开发内销房或外资企业开发内销房的，可以人民币支付。也有的实物支付的方式，如投资者得到一块土地，以建造一座立交桥、一条道路或一个停车库等建筑物来偿还地价。