私、大バカなんだって。

あなたの性格の問題に感じます。
何もかも諦めてしまうのではなく、少しずつ努力出来たはずですよね。

22歳で就職したとして、30歳までの8年間で出来ることは山ほどあったはずです。
少しづつでも現状を変えようとさえしていれば今のような状態にはならなかったのではないでしょうか。

言われたくないなら、周りのせいにばかりしないであなたが変わるしかないです。
私も学力はたかくなかったですし、一般常識も分からないことが多かったです。
でも悔しかったから、社会人になってから少しずつ学んでいきました。
頑張っている人間をバカにする人なんていませんよ。
これからでも遅くないです。