Namun, Mansel akhirnya berhasil bertahan selama 4 tahun bersama tim Lotus. Dari 59 balapan, dia berhasil finis 24 kali. Hasil terbaiknya adalah di musim 1981 ketika dia podium ketiga saat GP Belgia.
Pada tahun 1984, Mansell berhasil finis di Top 10 klasemen akhir. Sebelumnya di Monak Mansell mengejutkan banyak pihak setelah menyalip Alain Prost dalam lomba yang basah. Sayangnya, dia gagal finis lantaran menyenggol tembok pembatas dan kembali mengalami kecelakaan.
Di pertengahan musim, manajer tim yakni Peter Warr mengumumkan bahwa dia akan mengontrak bintang muda Ayrton Senna untuk musim 1985 dan tak memperpanjang Mansell. Hal itu membuatnya langsung pindah haluan setelah mendapatkan tawaran untuk bermain di tim Williams di musim 1985.
Saat bersama Lotus, salah satu yang dikenang dari mansel adalah saat aksinya mendorong mobil sampai garis finis di Dallas. Balapan di Dallas saat itu menjadi balapan terpanas dengan suhu mencapai 40 derajat celcius. Mansell saat itu langsung pingsan setelah berhasil mendorong mobilnya sampai garis finis demi mengamankan P6 lomba.
Starting from his first F1 pole, Nigel Mansell (Lotus-Renault-95T) led the first 35 laps. Tyre issues dropped the Lotus to 5th & the gearbox packed up on the last lap. Mansell attempted to push his car over the line, passing out in the heat.
Dallas GP, Fair Park, 8 July 1984. pic.twitter.com/CUyAjr6J4a