会社関係者の招待についてどうか悩んでいます。

長文ですが、相談させていただきます。すみません
3月に入籍とともに引っ越して、4月に引越し先の近くに転職したばかりです。
この転職先の社長を披露宴に招待すべきか、迷っています。

社員が数名しかいない小さな会社で、上司は社長のみです。
迷う理由は、自分があまり社長のことをよく思っていないので、招待したいという気になれないのです。
まだ入ったばかりの会社ですが、もう今年度いっぱいで辞めようと思っています。
いじめられているとか、待遇がひどいとか、そういうことではないので、私のワガママではあるのですが…
社長のことは人間性はとても良い方だとも思っていて、尊敬すべきところも多いのですが、ところどころ嫌だな、とか
合わないな、とか、嫌な思いをすることもたまにあり、どの仕事、会社でもあることだとは思いますが、そういうことが積み重なって、普通に仕事上の付き合いだけなら問題ないのですが、プライベートではなるべく関わりたくない、と思ってしまいます。

招待するとなると、主賓にあたるので、挨拶をお願いすることにもなると思います。
少し前まではそのつもりでいましたが、最近はなんだか嫌になってきてしまって、決めかねています。

主人は職場の人間関係がとても良好で、職場の方を大勢招待する予定で、
上司も、主賓で招待します。挨拶ももう依頼済みです。
私のこの状況も話しているので知っていますが、招待したら？と
言われています。

結婚式の翌日から1週間無理を言って休みをもらっていたり、社長にも結婚式の話などは
よく話題にもなるので日程や場所も話しています。
それなのに呼ばないのはまずいかなと、思ってはいるのですが…

来週には招待者を決めないと行けないので、どなたか良かったらアドバイスいただけないでしょうか？