理由がないとは思いません。人間関係が極端に狭まると、人間は元気がなくなる生き物だというのは、科学的にも主流の見解です。人間は社会的動物だというのはそういうことらしいです。趣味や仕事でのつながりはストレスにもなるけど、それも脳の刺激として必要だそうです。
お子さんが小さいと簡単ではないかもしれませんが、新しい友達をつくろうと思うとハードルが高くなるので、まずは会話する知り合いを増やす目的で、何かのサークル、教室、お仕事など始められてみてはどうですか。ご家族のお世話だけでなく、ご自分の脳にも気を配ってあげてはと思います。