考え方や捉え方が他人とは違いすぎるというのは、言葉のままにしか受け取れないことが原因ですか？
うまい例が思いつきませんが、「頭が痛い」と聞いて、前後の話の流れから「解決が難しくて悩んでいる」とみんなが理解できるところをそのまま「頭痛がする」と捉えて「え！大丈夫？」と言ってしまうとか？
そんな単純なことではないのかもしれませんが、こういう慣用句のようなあれこれをあなたの辞書に追加するだけで少し楽になったりしないでしょうか。

それから、自分の苦手なことをよくわかっているのですから、それをきちんと伝えたらいいと思います。
まわり全員に伝える必要はありませんが、わかってくれる人、助けてくれる人、あなたの場合は翻訳者のような人を作るだけで断然楽になるはずです。
何も言わずに「わかってくれない」と嘆いても仕方ないんです。
SOSを上手に出すことが生きづらさ解消の第一歩ですよ。