一般的なお話しかできませんが…
実際にお会いしたわけではないので、一般的なお話しかできませんが…

ブルベさん（特にブルベ夏タイプ）なら、グレーはお得意カラーのハズ。

「肌着みたい」と言われたのは、親しさならではの辛口表現かデザインの問題ではないでしょうか!?

また、「グレーは老ける」というのも、個人的には極論のように感じます（あえて言うなら、着物の色無地なら、それもあてはまるかと思いますが）。

ですから、もしグレーがお好きならば、一度の批判や「老ける」という説で諦めるのはもったいないですよ!!

一言でグレーといっても、濃淡や材質でいろいろなトーンがありますから、必ず似合うグレーがあるはずですし、
どうしても似合わないなら、顔周り（上半身）に別の色を持ってくればいいだけのこと。

センスのいいお友だちや店員さんにどんどん相談して、怖がらずに好きな色のお洋服にチャレンジしてみて下さいね！

（参考までに…）
カラー診断がなかなか受けられないとおっしゃるので簡単な自己判断法を。
ブルベさん、かつベージュや茶系、オレンジが苦手とのことですので、かなり高い確率で夏タイプか冬タイプでしょう。
その上で、
雰囲気が柔らかい方ならおそらく夏タイプ。
派手顔系なら冬タイプかと。
ブルベ夏タイプさんは紫陽花を思わせるような淡いシャーベットカラーが、
ブルベ冬タイプさんはビビッドなカラーがお得意です。
具体的なお色味はネットで簡単に検索できます♪

ただし☆
あくまで私個人の意見ですが、
パーソナルカラーは情報のひとつとして、あくまで参考程度にして（自分では選ばないような色にチャレンジするきっかけにするのがベストな活用法かと^^）、
あまり情報に縛られすぎることなく、
メイクもお洋服も、自分が好きな色・デザイン、自分で似合うと思う色・デザインを楽しんだ方が素敵に見えると思いますよ^^♪