Porque no veo el punto.
La ropa elegante no me hace sentir bien (a diferencia de la comida elegante, por ejemplo), generalmente me deja estresado por asegurar que el vestido no se arruine. Más a menudo que no es incómodo. Y no hace nada por mi autoconfianza (es posible que tenga problemas con la imagen corporal; considero que mi cuerpo es extremadamente poco atractivo a un nivel fundamental, que ninguna ropa puede pasar por alto.
La ropa elegante no atrae a la gente que me gusta. Atrae el tipo que yo no. Y realmente no me importa la buena opinión de alguien que juzga a los demás por su vestimenta.
Así que sí, no tiene sentido. Seguiré las normas de vestimenta hasta límites razonables, pero no me gustan (vestidos de una pieza o trajes de tres piezas)