渡瀬恒彦さんの正確な家族構成を整理すると、本人のほか、1979年に再婚した一般女性の妻・智恵さん、そして長男・長女の「子供2人・4人家族」となります。
長男の渡瀬暁彦氏は、TBSテレビのドラマ制作部に所属する実力派ディレクターとして知られています。『半沢直樹』や『小さな巨人』『アンナチュラル』『ノーサイド・ゲーム』など、TBSを代表する大ヒットドラマの演出補や演出を手がけており、業界内でも父譲りの情熱と誠実な仕事ぶりで高い評価を集めています。父の七光りを使うことなく、助監督などの下積みから叩き上げでキャリアを築いた姿は、まさに渡瀬家の気骨ある家風を象徴しています。
そんな兄の背中を見て育った娘にとっても、家庭は常に「安心できる聖域」でした。かつて過密な撮影スケジュールで多忙を極めた恒彦さんでしたが、オフの日には世田谷の自宅で子供たちと過ごす時間を何より大切にしていたといいます。母親である一般女性の妻が表舞台に出ることなく家庭をしっかりと守り抜いたことで、兄妹ともに健全な自立心を育むことができました。