平凡人生1

我四川省泸州市农村户口，妻子湖北省农村户籍，结婚后户口也没迁移，两人一直在外打工。大女儿在湖北出生后上户随我户口，开始本想定居湖北，小女儿在我家出生后故上户随妻子户口，这些都是家里父母所办理。现在因为形势发展决定定居我家农村，所以决定把妻子和小女儿户口迁移回我家，可政府官员说：可以迁移，但必须交纳违反计划生育超生罚款2万元，其他生育二胎都罚款了2万元。当时湖北地方政府允许并接受我夫妻二人生二胎并给予了上户口，因为现在关系到小女儿入学问题。（疑问：不迁移户口就不违反计划生育，迁移户口就违反了计划生育？）请问我是否该交纳罚款？谢谢！