下午3时，经过中午的休息的两军再次在大岩山掰摆开阵势，宇喜军与佐久间军相隔50步列阵，前排刚刚列阵，后排都没就位，两边的铁炮就开始互射起来。
佐久间军有5000余人，铁炮600多挺，柴田胜丰队2500人，铁炮超过300挺，只是在这山体之上，铁炮数量不能摆开，于是他们将900挺铁炮击中，列成三段，向宇喜多军射击。
三段击的火力不是无限连接的，但是在前15秒确实向宇喜多军倾泄了大量弹丸，以至于刚刚出去列阵的宇喜多军就倒下了数百人，军势被击溃，残军退回木山城内。
秀家当然不是坐以待毙之人，将手中500铁炮众集中，交给人力保持较为完整的高山氏宗，从后门出去于丸山侧翼列阵，与佐久间军展开对射。
而其他主力备队则在城内依托地形，用弓箭火力覆盖佐久间军。一味的防守是没有意义的，秀家将以美作备为主力，准备了3只千人规模的突袭部队，随时对城外的佐久间军发起反冲锋。
很快战机出钱，由于铁炮数量处于劣势，配属右翼朱雀备铁炮众死伤过半，高山氏宗不得不命令备队后撤，而负责敌军左翼攻势的柴田胜政以为宇喜多军要跑，赶紧指挥自己的备队追了上去。
结果就是自己被包在了木山城与朱雀备的交叉火力之间，柴田胜丰企图前朱雀备发动冲锋，在他开来这只1500人（得到增援500铁炮众）的备队已经算是超过20%，只需要再加一把火就能将其击溃。
结果朱雀备的毅力超出他的想象，秀家也及时派1000名遣中川军从后门而出支援已经与柴田军进入肉搏战的朱雀备。
陷入苦战的柴田胜丰被人从两个方向包围，身后还有木山城头上的宇喜多军向自己倾泄箭雨。渐渐支撑不住的柴田胜丰想要将部队后撤重整。
而在一旁负责主攻木山城的佐久间盛政也发现弟弟的窘境，调拨600人试图支援弟弟，佐久间阵型出现一道裂口。
宇喜多秀家眼疾手快命令打开城门，由冈利胜率领1000美作备为第一番冲出城去，击散正在攻城的佐久间部队，中川军组织800人为第二阵，扩大缺口。
而剩下的美作备500人和青龙备残兵混编，作为第第三阵出击。如果可以的话直接从缺口向右翼移动，阻断柴田胜丰的退路，配合朱雀备围歼柴田胜丰。
宇喜多秀家选的时机非常好，佐久间城头顿时被拉开一道口子，失去铁炮优势的佐久间军只能与宇喜多军进入到比拼人力的肉搏战中去。
战斗从下午3点一直行进到太阳下山，佐久间盛政和柴田胜丰与宇喜多秀家两边都没讨到好处，随着太阳下山之后，两方向后鸣金收兵。
经过一天鏖战，中川清秀本队2300人只剩下1600人，秀吉给与暂时支配的筒井顺庆军2000人，由于尾崎城的溃败，只剩下不足1000人，而豪族众1200剩下1000人左右。
已经基本失去战斗能力。
宇喜多家本队，青龙备剩余700余人、朱雀备剩余800余人，铁炮备被几乎成建制消减，剩下100余人，美作备剩余1300余人是目前秀家手上保存最完整的备队了。
早上出征的4000宇喜多军到了夜晚收兵统计时候只剩下3000余人了，这是宇喜多秀家成军以来没有经历过的苦战。
（以上数字为战斗减员，包括战死和受伤，不是单纯战死人数）
出于无奈，秀家只能让人传令在岩崎砦驻守的明石景亲备中备1000人趁着夜色调拨过来。
当然秀家相信对面的佐久间军一定也不好受，两边都是精锐，因此其战损人数应该与宇喜多军差不多，两边都在舔舐伤口准备第二天的战斗。
只是羽柴秀吉本队从大垣城回转的很快，于20日午夜就到达贱岳以南，而作为若狭国主的丹羽长秀，也率领3000人来到贱岳南部桑山重晴身后。
几乎在统一时间，处于木山城的宇喜多秀家和处于尾崎城的佐久间盛政收到了羽柴秀吉已经来到贱岳的消息。柴田胜家再次向佐久间盛政派去要求撤军的使者。
同时命令本来负责侧击木村定次的前田利家大岩山赶去，负责掩护突袭部队撤退。
至此，已经在堂木山顶的静坐一天的前田利家，这才命令本队稍作休整之后，向大岩山方向运动。
已经明白局势无变更之可能的佐久间盛政，命令部队收拾行囊，他本来计划于4月21日黎明时分撤军。
只是羽柴秀吉怎么会允许你佐久间盛政从容撤退，在到达贱岳的第一时刻，就命令宇喜多秀家、桑山重晴、丹羽长秀，中川清秀包围尾崎城，拖延佐久间盛政的撤军，自己会率领本队万余人跟上。