1864年年末，僧格林沁嗅着捻军的味道，在江苏、山东几出几入地拼死追踪。有时候一月之间，奔驰不下三四千里。捻军利用他急于求战的心理，故意避而不战，每日行军一二百里，拖着他绕圈子。僧格林沁累个半死，不但顾不上吃饭，连下马的时间都没有。虽然如此卖力，却始终无法和捻军主力做决战，于是，僧格林沁得了狂躁症。1865年5月，僧格林沁终于在山东菏泽的高楼寨找到了捻军主力。其实，这是捻军首领赖文光故意让他找到的。
赖文光是个军事奇才，他把捻军最擅长的游击战和太平军擅长的千里奔袭的运动战结合为一，创造了属于他自己的战法。他用了近半年时间，牵着僧格林沁的鼻子跑来跑去，跑得僧格林沁五内俱焚，最后在高楼寨设下埋伏圈，引早就怒发冲冠、失去理智的僧格林沁进入包围圈，一番血战之后，僧格林沁被杀，他的骑兵团全部战死。
清政府唯一倚靠的军事力量灰飞烟灭，只好启用它最不愿意用的湘军。