Гм. У млекопитающих половой диморфизм по окраске вообще-то не слишком распространен.

Что же касается человека, то весьма зависит от культуры - посмотрите на равнояркие одеяния мужчин и женщин в европейской живописи - от средневековья до нового времени.
Или на современных укутанных в черное женщин рядом с достаточно яркой одеждой мужчин в традиционных исламских социумах.

Так что "преимущественное украшение женщин", похоже, всего лишь локальный и недавний эпизод европейской культуры.