本罪侵犯的客體是被害人在家庭成員中的平等權利。對象只限於年老、年幼、患病或者其他沒有獨立生活能力的家庭成員。我國婚姻法明確規定：“禁止家庭成員間的虐待和遺棄。”並對家庭成員之間應履行的扶養義務作了規定。
有負擔能力而拒不履行扶養義務，就侵犯了年老、年幼、患病或者沒有獨立生活能力的人在家庭中的平等權利。遺棄行為往往給被害人的生命、健康造成威脅，為輿論所不齒，也影響社會的安定團結。因此，同遺棄的犯罪行為作鬥爭，有助於形成壹個少有所養、老有所依的良好的社會環境，有助於保護婦女、特別是兒童和老人的合法權益。