義両親へのマナーについて

数ヶ月前に結婚し、東京から地方に転居しました。
両家顔合わせは夫と義両親が東京に来てくれて、レストランで行いました。周辺を案内したり実家にも案内し、努力して迎えたつもりです。
先日義母から私の母に連絡が入り、「是非家(夫の実家)に来てほしい」と、両親と私に来てほしいということが伝えられました。私の両親は身体が弱く、遠出することは難しいので私のみ伺いたいということで返事をしました。
夫にそのことを伝えましたが、「挨拶がないことは誠意が感じられないが、その状況であれば仕方ない」ということ、現在結婚式や披露宴の予定はないのですが、「お互いの親が挨拶をしたり行事に参加したり行動の積み重ねが必要だ」というようなことを言われました。
私自身は、結納金の半返しもしたいと思ってたので夫とご挨拶に行こうとは考えていましたが、私の両親が同行しないことは一般的に失礼にあたるのでしょうか？
また、夫の親戚の集まりがあるからきてほしい、と言われたことが以前あり、そうしたことは必要だと思い私は「行きます」と行ったのですが、私の方の親戚の集まりに来てほしいと伝えた際には、夫は快く受けてくれませんでした。
そうした過去の夫の様子もあり、私の負担が大きく感じ、なぜ私だけ頑張らないといけないのかと悩みます。
本当は夫にはサポートしてほしいのですが、私が義両親にご挨拶する時も夫は両親側に立つのだろうと考えると、気がすすみません。
普段から夫の頼りなさを感じ、本人に言いづらいのですが夫が不満を口にする時には私からも伝えています。夫は頼りないしサポートしてくれる気配もなく、感謝や謝罪の言葉や気持ちも伝わってきません。
正直結婚を後悔しています。結婚相談所で出会ったので、一般的な交際で出会ったわけではないので、難しいです。