Почему после разлуки вместо страсти отчуждение?

Скорее всего его раздражительность вызвана тем, что вы сразу пошли искать следы его измены.

Запах чужих духов, следы помады на рубашке, женские трусы под подушкой или прилипший к унитазу или мусорной корзине презерватив. По-моему, это самый первый вариант, который можно предположить. Естественно, это вызовет раздражение, как минимум.

Вторая причина, как правило, претензии и придирки. Не убрался, не перестирало, посуду не вымыл, не ждал, не скучал, ремонт не доделал, машину не помыл... Тоже, вроде, причина раздражения ясна.

Третья причина - избыточное любопытство. Как жил, что делал, как проводил вечера, с кем встречался, как работал, скучал ли, как скучал и т.д. и т.п. Он работал, пока вы на солнышке нежились и в воде плескались, обуреваемые ленью, во-можно, план переполнял, а до него докопались - чего это он такое не отдохнувший.

А вот если бы была страсть, а не просто желание, (это к женщине, с которой он прожил много лет, с которой уже не первого ребенка воспитывает, которая по пути растеряла все прелести юной фигуры и порядком притомила, как личность), то это точно было бы инициировано чувством вины за измену.