擅自在承包责任田建猪舍应予拆除

擅自在承包责任田建猪舍应予拆除来信去年，我家在村里承包一块责任田，今年我在责任田上建起一个简陋的猪舍，剩余的空地仍种上了农作物。现我家责任田周围之有两户的责任田经批准建起了楼房，前些天镇土地管理所的同志来检查时，要我家拆除猪舍，他们的要求合法吗？广西...