Skor 2-0 untuk keunggulan Chelstea bertahan hingga turun minum.
Selepas jeda, Chelsea menambah gol lagi melalui Enzo Fernandes pada menit ke-54.
Sebelum laga berakhir, Aston Villa mendapat gol hiburan lewat Moussa Diaby pada menit 90+1'.
Berikut hasil lengkap partai ulangan putaran keempat Piala FA 2023-2024:
Southampton 3-0 Watford (Sekou Mara 52', 58', Che Adams 76')
Coventry City 4-1 Sheff Wed (Kasey Palmer 3', Callum O'Hare 50', 56', Haji Wright 58'; Bailey Cadamarteri 10')
Plymouth Argyle 1-4 Leeds United (Brenda Galloway 78'; Wilfried Gnonto 66', Crysencio Summerville 97', Georginio Rutter 111', Ryan Hardie 117'-bd)
Nottingham Forest 1-1 (5-3) Bristol City (Divock Origi 8', Jason Knight 14')
Aston Villa 1-3 Chelsea (Moussa Diaby 90+1''Conor Gallagher 11', Nicolas Jackson 22'; Enzo Fernandez 54'