Отдаляться...

У меня сложилось две непростые ситуации с двумя разными людьми. Один человек выдвигает мне, возможно, обоснованные претензии - ты так отдалилась от меня. Другому точно такие же фразы говорю я.
И, если в первом случае, мне легко сказать в ответ - "Отдаление произошло, поскольку отдалялись оба", то во втором случае я не могу себя объективно увидеть и понять, как я отдалилась.
Почему так получается, что с одними людьми я могу общаться годами, а с другими ближаюсь, чтобы тут же разлететься друг от друга? А как у вас?