填房：谭正德，育有长子、长女。杨森妻妾成群后，谭氏遭冷落，独自守着广安老家空房，直到1976年以92岁高龄谢世。
三妾刘谷芳，云南禄丰人。1913年杨森在滇军时所娶，抗战时期，刘谷芳患肺病去世。
四妾田衡秋，是杨府十二钗中地位最高者，深得杨森宠爱。1921年，杨森任沪永镇守使，依仗权势强娶。1949年，田衡秋带杨森财产先行逃往台湾。未过几年，前往香港探亲时，因突发脑溢血引起半身偏瘫20年。晚年全靠美国的女儿担负。
五妾萧邦琼，是杨森长驻沪州时强娶，1931年，萧邦琼由沪州上船时，溺水身亡。
六妾陈顺容，是典型广东女子。原为三姨太刘谷芳的贴身丫头，15岁时被杨森酒后奸污，后收为妾。后来得精神病，死于重庆。
