彼氏の趣味について

同じ趣味を楽しめる方が一緒にいる時間を確保できるし、趣味のコミュニティで浮気(心変わり)されたりの心配が少なくなるから、安心ですよね。

何回が同行して主さんが苦痛を感じてるなら、リスクを覚悟のうえではっきり断った方がいいと思いますよ。
無理に付き合って彼のこと自体を嫌になっちゃったら本末転倒だし。
同行はせず、後から話だけは聞いてあげたらいいんじゃないかな。