我现在爱的这个女人，她有两个孩子，一男一女，她和她老公离婚了，但是他们还是住在一起，前段时间他们没有住在一起，住在一起的原因是，男方家可以帮她养孩子，如果他们两个不住一起，男方家就不帮她养孩子，这女的没办法，只有住在一起，这女的是跟家人闹别扭才跟这男的结婚的，这女的以前出轨过一次，就差点她自己爱的人结婚了，就因为那个男的老爸说错了话，才没能在一起的，现在这女的很爱我，也很愿意跟我在一起，我也愿意跟她在一起，大家说我有没有权力爱这个女人？又或者说，她还是她老公的人，我不能去爱？