在这种情况下，虽然离婚协议判定一人抚养一个孩子，但前几年孩子都暂时在男方那边上学，这可能涉及到实际抚养安排与协议约定不完全一致的问题。下面从不同方面为你分析可能面临的情况及处理方式：

    生活学习现状维持

    现状合理 ：如果目前孩子在男方处上学的安排，有利于孩子的生活和学习，双方可以继续维持这样的抚养状态。毕竟稳定的学习和生活环境对孩子成长至关重要。

    签订补充协议 ：为了避免日后产生纠纷，双方可以就孩子暂时都在男方处上学这一情况签订补充协议。明确在此期间双方的权利和义务，例如抚养费的承担、探视权的行使等。比如约定在此期间女方需要支付一定的抚养费用于孩子的生活和学习开销，同时女方享有定期探视孩子的权利。

    一方违反协议

    女方的诉求 ：如果女方认为按照离婚协议自己应该抚养一个孩子，而男方拒绝将孩子交给女方，女方可以与男方协商解决。若协商不成，女方可以向法院提起诉讼，要求男方按照离婚协议履行义务。女方需要向法院提供证据证明自己有能力抚养孩子，并且抚养孩子有利于孩子的成长。

    男方的顾虑 ：男方可能会以孩子在当地上学稳定、突然改变环境不利于孩子成长等理由进行抗辩。法院在审理时会综合考虑各种因素，如孩子的意愿（如果孩子达到一定年龄）、双方的抚养条件等，来做出公正的判决。

    抚养过程变更

    后续变更 ：随着时间推移，如果情况发生变化，比如孩子上学地点变动、双方抚养能力改变等，双方可以协商变更孩子的抚养方式。如果协商一致，可以签订变更抚养协议；如果协商不成，也可以向法院起诉请求变更抚养权。

    法院判定因素 ：法院在审理变更抚养权案件时，会从有利于子女身心健康，保障子女的合法权益出发，结合父母双方的抚养能力和抚养条件等具体情况进行判决。例如，如果女方有证据证明男方存在虐待孩子、不尽抚养义务等情况，法院可能会支持女方变更抚养权的请求。

   如果在处理过程中遇到法律问题或需要起草相关协议，建议咨询专业律师以维护自身合法权益。