拭き取る派です。
こんにちは。

成分についてはそんなに気にしなくていいと思いますよ。身体に悪いといえば悪いでしょうけど、
それ以上に（直接的に）悪いことはたくさんありますから。大気汚染とか。
口紅やグロスなどは飲食しなくても絶対に食べてますから、
メーカーさんもやたらな成分は使わないでしょう（と、思うしかない（＾＾；）。
ラメやパールそのものは食べても吸収されないだろうし、
色素に限って言えば化粧品で口に入るより食品・飲料に添加されてるほうが多いような気が。

でも気になるようなら拭き取ったほうが、精神衛生上もいいんじゃないでしょうか。

私は、特に外出先でものを食べるときは必ず拭き取ります。
使っている口紅・グロスが香りの強いタイプだと食事が美味しくないのと
食べものが唇につくと舐めちゃうので、ズルっと滑る舌触りｗがイヤなんです。
舐めないで拭き取ると、塩分などが残って痒くなってしまいます。
お行儀悪いですけど、自宅以外ではその場で洗い流せませんから；；
唾液も唇を荒らすのでよくない＆食事前にグロスなどを拭き取ると乾燥するんですが、背に腹は…。