スルーしてOKかと。
適当に相槌を打てば良いかと思います

私も友達に「色白で美肌だね～。」
と言われる事もありますが、
「いや、本当に敏感肌で困ってる！」って言います。

実際に酷い脂漏性湿疹で皮膚科に通っていたし、
現在、美肌風に(笑)見えるのは
すっごい努力しているからなんです！

漢方薬を飲み、食事にも気を付け、
睡眠もきちんと取って、ケアをしてきた賜物です。

化粧品も色々試して来てやっと合うのに出会ったり、
結構、苦労してきているのに、他人はそんな事分からないから
簡単に「肌がキレイでいいね」って言います。

もしかしたら、質問者様を困らせている方もそういった経緯のある方かもしれませんよ？

ま、「今日はいい天気だね」って言ってるくらいの感覚で受け止めたら
良いんじゃないでしょうか？

私も最近は説明しないで「お金と手間暇かけてるから」って言います

ほら、痩せている人がよく「ダイエットしなきゃ～」って言ってるのと同じなんですよ。
「そんなことない、キレイ」って言われたいだけだと思うので、
そう言ってあげれば、きっと直ぐに次の話題に移れますよ～

なので適当に、返答してあげて下さい。
頑張ってくださいね