自分の気持ちが間違っているのか意見をお願いします。

結構して4年近くになる夫がいます。
夫の実家は隣の駅で良く義父から「酒を飲みに来ないか」と誘われています。
夫は面倒と口では言っていますが、親孝行の為だから、と1月に一度は呼ばれたら帰省しています。

最近では交流関係がほぼ無い事もあり、夫に「山へ行かないか」などと泊まりになるような距離の所にも誘ってきます。
私としては最近クマの出没も増えてますし、希望している山が明らかに素人には難しい所ばかりなので行ってほしくはありません。
また以前実家の修繕を頼まれて夫が手伝いに行ったのですが、１０ｍ程のはしごを登って細い木の上を歩くなど、基本的に業者がやる作業をお金がないからと頼まれたこともありました。

そして昨日、また山登りに来月行かないか、と誘われたようです。
何とか、経験が少ない人も登れる山にしたそうですが、やはりクマは出るという事ですし行ってほしくありません。

夫の親孝行という気持ちも理解出来ますし、実家との交流は大事にするべきだと思いますが、ケガをしたり何かあった時に私は義父を許す事は出来ませんし、そんなことになってほしくはありません。
そんな私の気持ちを考えてもくれずに簡単に誘ってくる義父に悲しくなり、今1人という事もあり泣いていました。
私の両親は夫に対して「私の事を借りてしまって申し訳ない」「旦那さんがＯＫなら来ない?」など配慮してくれます。
ご実家の家族が大事なのは当たり前ですし私も両親と姉弟が大事です。
ですが、今の家族は私で、私への配慮がなく夫を危険な目に簡単に誘う義父へストレスを感じています。

この気持ちは間違っているでしょうか。
夫には溜息をつかれて価値観の違いを感じて辛いです。
どなたかご意見をお願いします。