相手に気を持たせる言葉をかけていたなら、何かしら理由をつけて謝って関係を切る
気を持たせるような言葉を事前に紡いで、事後にどうでもよくなったなら非は質問者さんにあるので、「こんなこと言うのは不誠実だけどやっぱりお付き合いは無理そう」と謝りましょう。