我与前夫在一起时没有办理结婚证,共同孕育一子双方协议分手时把小孩给了前

我与前夫在一起时没有办理结婚证，共同孕育一子双方协议分手时把小孩给了前夫，现在前夫常年不在家把小孩寄养在别人家里。小孩得不到关爱，他没有尽到扶养和照顾孩子的义务。我可以要求变更扶养权吗？