Simplemente, honestamente, dígale que se ha dado cuenta de que no está interesado en él y cree que ambos merecen la oportunidad de conocer a alguien realmente especial, el primero. Y que no sería honesto continuar la relación ya que no hay sentimientos involucrados.
Pero no provoques una pelea seguida de un sentimiento de culpa para el hombre y usarla como una excusa para romper o establecer algo así. La honestidad es la mejor política.