根据《民法典》的规定，离婚后父母对子女仍有抚养、教育、保护的权利和义务。如果父母双方对子女的抚养问题协议不成，可以向人民法院提起诉讼申请解决。
在您提供的情况下，离婚协议上两个孩子都归男方抚养。但是，这并不意味着女方没有抚养权。如果女方想要变更抚养关系，她可以向人民法院提出申请，并提供证据证明男方无法履行抚养义务或者对子女成长不利等因素。另外，如果男方也想要变更抚养关系，他同样可以向人民法院提出申请，并证明女方无法履行抚养义务或者对子女成长不利等因素。
因此，无论是在协议离婚还是诉讼离婚的情况下，女方都有权争取抚养权，但需要满足一定的条件和程序。
