【絶望】相手と距離が縮んで仲良くなればなるほど「この人は嫌がってないんだろうか？」と不安になるんだが

本当に俺と話していてこの人は嫌がってないんだろうか？って思う様に途中からなって、自分からいきなり距離を置くようになるんだけどこれどうしたら直せる？
例えば相手と普通にLINEをしているのに、LINEの返信速度をいきなり落とすとかやってしまう。