生育保险领取及扣除

我去年因生小孩,休息了4个半月产假,从社会保险中心领取了1万多的生育保险(其中3000是住院补贴).
休息期间,单位工资全额照发.
但上班后,单位要求从以后工资里扣除这笔费用(除了3000元住院补贴外),单位说这笔钱本来就是单位给的,所以应该扣除.
但问题在于我的`工资本来就不高,从社会保险中心领取时是按照上海市平均工资2千多给的,单位发给我的工资还没有平均工资高.
这样一来,我实际并未从生育保险中得到补贴,只是没有扣我工资而已.
我是否可以要求将单位在产假其间发的工资退回,拿生育补贴就可以了.