刘仁轨坚决反对：“加林城地势险阻守卫坚固，进攻就会大量伤亡，守卫也会旷日持久。周留城，是敌巢，敌军头目都集聚在那里。如果攻克周留城，其余各城自然就好夺取了。”
按照唐军部属，孙仁师、刘仁愿及新罗国王金法敏于是率领陆军进发，刘仁轨则与杜爽、扶余隆率水军沿着熊津、白江进军，与陆军会合。刘仁轨在白江口遇上了倭军，唐军四战皆捷，焚烧倭国战船四百艘，一时间“烟焰涨天，海水皆赤”，倭军大败。
扶余丰脱身逃走，所佩宝剑被缴获。百济王子扶余忠胜、扶余忠志率领自己的兵众及倭军、耽罗国使投降，只有主帅迟受信占据的任存城还未被攻克。
当初，苏定方灭亡百济，主将沙吒相如、黑齿常之纠集溃卒，凭借险要地势接应鬼室福信。白江口之战后，二人投降唐军。
刘仁轨展示诚意，让他们攻取任存城来证明自己的真诚，又为其补充军械、粮草。
孙仁师认为此举可能会招致他们反叛，刘仁轨却坚持：“我观察沙吒相如、黑齿常之真诚并有谋略，乘机立功，还怀疑什么？”