質問者さまはまだお若くていらっしゃるのかな、と感じます。その前提で考えると、年上の上司にあたる方が目下のアルバイトの後輩に奢ってくれるのはさほど気にする事ではないと思います。
もし他の方には違って、質問者さまにだけそうなら話は変わってきますが。

普段心がけていらっしゃるお気遣いで充分だと思いますが、もしお気持ちの上で申し訳なく思ったりするのであれば、例えば旅行のお土産を差し上げたり、その方のお好きそうなものを見かけたらさり気なくプレゼントしたりする程度(あくまでも自分が買ったついでに、という体で)でよいと思います。喜んで頂けますよ。

それにしても、世の中そのような上司ばかりではありません。素敵な上司の方でよかったですね。アルバイト頑張ってくださいね。