Хороший вопрос, куда сложнее чем кажется.
Было и то и другое. Что делать? Для начала понять с чем связанно (ежеменутный ли соблазн или реальная проблема отношений).
Физическую измену простить несложно, хуже если измена обусловлена не простым "хочу", а "мне это нужно, потому что...".
Слабость или глупость прощаемы, не прощается действие обдуманное и целенаправленное.
И в любом случае стоит поинить: потерять проще чем найти и третий всегда лишьний.
Каждый будет решать сам, исходя из объстоятельств и внутреннего настроя, в конкретной ситуации.