投稿者さんの思っていることを、AさんとBさんに話してみてもいいのかなぁと思いました。3人のままがいい、という考えは一緒でも、それが「3人が楽だから」なのか「Dさん(またはCさん？両方？)が嫌だから」なのか「人間関係のごたごたに巻き込まれたくない」からなのか、それぞれの認識が微妙に違うかもしれません。