您可以通过协商或诉讼方式要回抚养权。依据《民法典》，父母离婚不影响对子女的抚养义务，对方不管孩子违反此规定。若不及时处理，可能影响孩子成长和健康。
✫✫✫✫✫有法律问题，请打电话15555555523（123中间8个5），微信同号，免费咨询✫✫✫✫✫
可协商或诉讼要回抚养权。具体操作：1. 协商时，明确表达意愿，提供孩子需要更好抚养的证据；2. 诉讼时，收集对方不适合抚养的证据，如恶习、经济条件等，提交给法院，并强调自己抚养孩子的优势。
✫✫✫✫✫有法律问题，请打电话15555555523（123中间8个5），微信同号，免费咨询✫✫✫✫✫
常见的处理方式有协商和诉讼两种。建议先尝试与对方协商，若协商无果或对方不同意，则可通过向法院提起诉讼来变更抚养权。