1. 不确定感，结束婚外情并回归家庭可能意味着要面对妻子或伴侣的愤怒、失望和质疑，这可能会让他感到害怕和不安。他不确定自己是否能够承受这种情感上的压力，也不确定家庭关系是否能够恢复如初。

2. 责任感缺失，有些男人可能缺乏对家庭和婚姻的责任感，他们可能更倾向于追求个人的快乐和满足，而不是承担家庭的责任和义务。因此，即使他们意识到自己的错误，也可能因为缺乏责任感而不愿意主动回归家庭。

3. 拖延和逃避心理：有些男人可能习惯于拖延和逃避问题，他们可能认为只要自己不主动提出回归家庭，就可以暂时保持现状，避免面对冲突和矛盾。这种心理可能让他们无法下定决心采取行动。

4. 外部压力，有时候，男人可能受到来自小三或社会的外部压力，这些压力可能让他们难以做出决定。例如，小三可能会威胁要揭露他们的关系，或者社会舆论可能会让他们感到尴尬和难堪。这些压力可能让他们更加犹豫和不确定。

5. 自我价值感问题，出轨可能让男人对自己的价值感产生怀疑，他们可能认为自己在家庭和婚姻中已经没有价值或地位。因此，他们可能希望通过保持婚外情来证明自己的魅力和吸引力，以维持自我价值感。

无论是什么原因，出轨都是一种不负责任的行为，会对家庭和婚姻造成严重的伤害。如果男人真的想要结束婚外情并回归家庭，他们需要勇敢地面对问题，承担起自己的责任和义务，并积极寻求解决方案来修复家庭关系。同时，他们也需要反思自己的行为，并努力避免再次犯同样的错误。