炮袭开始的时候，刘哲良他们也开始了撤退。自始至终，刘哲良部面对的都是在小孤山攻防战中颜面尽失的山田师团。山田城二急于第一个攻陷北岸棉船岛要塞，所以第112师团的攻势一波强过一波。在日军如此强势的进攻下，刘哲良部还有徐枫带过去的304团损失惨重。到他们接到何正降命令，开始后撤的时候，两部人马加起来不过只剩下二百五十人左右。