I'd write like this:
Со временем мы с ней стали общаться (get in touch) все реже и реже и как-то постепенно отдалились друг от друга.