可离婚后,她就从来没在家给小孩做过饭,也很少管小孩作业,请问我是否可以把小的那个要过来归我抚养?

李律师，上午好。我和前妻离婚3个月。当时协议两个孩子都归她，她经济能力比我强，我出抚养费。可离婚后，她就从来没在家给小孩做过饭，也很少管小孩作业。请问我是否可以把小的那个要过来归我抚养。大的17小的9岁。我在上班，每月还房贷，还有40万元债务。