両家顔合わせの費用

先日彼のご両親に挨拶に伺ってきました。
何度もお食事をしている間柄なので、
反対もなく快く快諾をしていただいています。

来月両家顔合わせの予定ですが、
両親を招待するような形で、
費用は私たち新郎新婦で持ちたいと
両家には伝えてあります。

しかし彼のご両親への挨拶の際、
顔合わせの費用の足しにしてと
かかる費用の半分以上を渡されてしまいました。
ご祝儀袋に入っておりました。
元々支払いの件は伝えてあったので、
断りはしたものの衣装代にでも使えばいいよと
強く渡していただいたので、
断りきれずにいただいてしまいました。

先日自分の家に挨拶に行った際には
支払いは自分たちでしたいことを伝えたので、
私の親はお金を渡すつもりでは無さそうです。

当日自分の両親は私と彼が払っていると思っている為、
私たちに『ご馳走さま』などと言ってくるかも…と
考えると、向こうのご両親は半額以上を
渡している状態なので、複雑になってしまうのかと、
悩んでおります。

その場合、自分の両親に向こうのご両親から
お金をいただいていることを伝えておくべきなのか、
一度もらったお金をお返しするべきなのか、、、

何かうまく纏まる方法はございますでしょうか？