枥木县人。黑羽藩家老安藤小次郎的儿子，有一个哥哥安藤三郎，后来也做到陆军中将。他自幼成为瀬谷月山的养子。经成城中学，陆军中央幼年学校预科，1910年日本陆军士官学校第22期毕业。11月陆军少尉，第59联队副。1918年日本陆军大学校第30期毕业。

经历陆军省军务局付，陆大教官，阿根廷使馆付武官，奈良联队区司令部付，步兵第70联队大队长，陆大教官，步兵第13联队长，近卫师司令部付（东京帝国大学教官）等，1937年8月2日晋升陆军少将。第3师团司令部付，1938年3月1日成为第十师团步兵第33旅长，以一个旅团冒进，在滕县（今滕州）击破川军王铭章部，在台儿庄会战中败于西北军孙连仲部，在遭到汤恩伯部围攻后，借口联络失误后撤，后在徐州会战中在禹王山击败滇军卢汉部，后参加武汉会战，在大别山北麓攻击前进，占领信阳。1939年10月随部队回国，升任陆军中将，基隆要塞司令官，1940年8月1日被编入预备役。1944年3月，任满洲国铁路护卫司令，1945年4月成为朝鲜罗津要塞司令官，同年9月日本投降后，做为战俘被苏联扣留，后送给中国，被关押在东北监狱。1954年5月27日自杀。