一緒に居てダルいならちょっと距離とった方がいいかも
その話をしてくるのも、むしろ縁を切りたくないから同意(あるいは許容)してほしいという気持ちの表れなんじゃない?
勝手に邪推せず、ちゃんと話し合ってみてそれから決めてみては?