私生活において、池谷幸雄は3度の結婚歴を持つことでも知られています。その波乱に満ちた女性遍歴と家族関係も世間の大きな関心を集めてきました。
最初の結婚は1995年、元テレビタレントの女性とゴールインし、1児(長女)をもうけたものの1998年に離婚。2度目は2000年、実業家の女性と再婚しましたが、価値観の不一致などから短期間で再び離婚に至りました。若き日の派手な交友関係や奔放なキャラクターも重なり、ワイドショーを賑わせる時期が続きました。
その後、2010年代半ばに一般女性(体操教室関係者)と3度目の再婚を果たし、男児を含む子供に恵まれています。現在の池谷は、過去の失敗を教訓に家族を何よりも大切にしており、子煩悩な父親として穏やかな私生活を送っています。長女とも良好な関係を維持していると伝えられており、波乱を経験したからこそ築けた温かい家庭が現在の彼のバイタリティの源となっています。