1971年に妻を亡くして以来、アルコール依存症となり、1984年2月8日、長男の信義に飲酒に出かけようとしたところを窘められ、激昂して東京都品川区東五反田の自宅に灯油をまいて放火した。この結果、荷物を取りに戻ろうとした住み込みの手伝いの女性が焼死した[1][2]。
隆三は建造物放火容疑で逮捕起訴され、松沢病院に入院、懲役3年・執行猶予5年の有罪判決を受ける[1]。判決では「犯行直前の行動にはやや異常な面があり、アルコール依存症などにより必ずしも正常な精神状態にあったとは認め難い」と指摘された[1]。
この事件のために隆三は社長を退任し、非常勤役員となる[1]。長男信義は取締役ではあったが年が若いため、次期社長には永山武臣副社長が就任した[3]。
事件以後は東京渋谷の長女のもとに身を寄せ、完全に断酒していたと伝えられる[1]。