Это измена?

Не буду вдаться в детали, просто недавно заинтересовал такой вопрос. Если мужчина и женщина заключили второй раз брак, но у кого-то из них (или у обоих сразу) время от времени происходит секс с предыдущим супругом/супругой, будет ли это считаться изменой? Или это скорее привычка, дань прошлому, еще что-то. Может быть, это лучше, чем если супруг/супруга будет изменять с кем-то посторонним? Кто как считает?