4月初，左宗棠派队赴援江山。4月13日，亲督率各军进扎江山县石笏（hù）地方。14日，在小清湖击败李世贤部。16日，分路进攻石门花港。经反复激战，于20日攻破太平军营垒。李世贤部东走龙游、寿昌、兰溪，返金华。左宗棠正议回师衢州，又逢太平军杨辅清部由皖南宁国进入浙江，经昌化南下遂安，于是改变计划，令刘典率军由华埠、马金自率亲兵及各营由常山进驻开化。
5月13日，杨辅清部退回到皖南。左宗棠自开化还军，于5月31日驰抵衢州西北的沐尘。左得知李世贤已从东、南、北三面聚集重兵围困衢州，而西路常山已有刘培元一军驻扎，遂令新到的王德榜、屈蟠两军进江山，而自率各军由北路进击。
6月8日，左宗棠指挥新任按察使刘典，道员屈蟠、王德榜及总兵刘培元、李定太等分九路并进，在龙游附近击败李世贤部。15日，李再战，又失利，遂从龙游退守金华府。这时太平军内部存在着太平军与广东“花旗”的严重矛盾，加上将帅之间“自相猜贰”，大都不接受李世贤号令，所以难以组织强有力的攻势。6月20日，天王洪秀全命李世贤率军回救天京。
从全局看，此时太平军已处于被动地位，而左宗棠指挥的军队屡经扩编和增调，总数已达3万人，而且配备了不少外国侵略者提供的新式枪炮，实力大为增强。
7月3日，左宗棠分南北两路继续东进，一路由刘典、杨昌浚率领进攻衢州北部地区，连破太平军营垒三十余座；另一路由刘培元、屈蟠、王德榜等指挥攻破太平军衢州东南两面的营垒，迫使太平军退守龙游、兰溪等处，衢州围解。
