It was, "in reality," a pretext to return to see X, and thereby to reward my secret affection.
Это «на самом деле» был предлог, чтобы вернуться к Х и таким образом воздать должное свое тайной привязанности.