El silencio puede ser grosero o preferible, dependiendo de la situación. En tu caso, eres consciente de que la chica no se siente positivamente hacia ti. Por alguna razón, ella no te está devolviendo tus sentimientos. Así que es preferible que ella esté en silencio.
Es mejor dejar algunas cosas sin decir.