趣味をやめたいけれども、やめると人間関係を全て失ってしまう

20代独身一人暮らしの会社員です。学生時代はずっと部活で楽器を演奏しており、社会人になってからも楽団で演奏会に参加しています。
私の友達付き合いはすべて音楽関係で知り合った人達です。今の恋人もそこで出会った人で、私の事を「演奏している姿が好き、たくさん練習してクオリティの高い演奏をしているストイックさが好き」とのことで交際に至りました。
たしかに私は小さい頃から楽器を習っていたので、大人になってから始めた人よりは弾けると思います。 真面目な性格なので、演奏会のたびに苦労して自分用の正確な楽譜を作り、自主練に多くの時間を費やしています。そのことで、本当の実力以上に「上手い上手い」と祭り上げられてしまっています。
しかし、それが大変辛いです。楽器の演奏は、「できる」ことですが、「好きな」ことではないです。要領が悪く譜面覚えも悪いですが、周囲からの期待を裏切らないために必死に練習しているだけです。

会社では頭を使う仕事で、ストレスも多いです。平日は、良くて21時頃に会社を退勤し、22時過ぎに家に着き、夕食を作り片付けや掃除、風呂…と過ごしていると、もう日付が変わる頃になります。
楽器の練習ができるのはそれからですが、もう体はヘトヘトで、一刻も早く寝たいです。疲れた頭で楽譜を覚えるのは辛いです。暗譜が間に合わず徹夜で練習をしなければいけないときもあります。最近は睡眠不足で驚くほど白髪が増えました。楽器を持つと、こんな物さえ無ければな…と思います。
私は本当は子供向けのテレビゲームが好きです。演奏会のために好きでもない曲を聞く時間があったら、頭を空っぽにしてゲームで遊びたいです。

先日、恋人に初めて「もう演奏会に出たくない」と話したところ、「数曲覚えるのがそんなに大変なこと？努力することは大切だよ」と言われました。彼自身は優秀で人気のある人なので、「頑張ってもできない人」の気持ちはあまり分からないと思います。言う通りにしなければ私は多分捨てられるので、少なくとも次の演奏会は予定通り出ます。

演奏すれば皆褒めてくれるし、友達でいてくれるし、仕事以外で人と繋がれる安心感があります。楽器を辞めたら仕事以外失って一人になります。
楽だけども孤独になる道を選ぶか、疲労困憊になっても今の居場所や世間体を守るか…趣味のことで贅沢な悩みとは思いますが、苦しいです。