Tuttavia, la scarsità di risultati rese difficile la situazione all'interno del team: dopo il Gran Premio di Germania, nel quale era stata introdotta una nuova versione della vettura senza ottenere miglioramenti apprezzabili nelle prestazioni, da Matta fu licenziato insieme ad alcuni manager.
Dopo una gara piuttosto anonima in Ungheria, Panis colse quello che sarebbe rimasto il suo ultimo punto in carriera nel Gran Premio del Belgio, chiuso in ottava posizione.
Nel frattempo, però, il futuro del pilota francese in Formula 1 divenne piuttosto incerto: già dai primi mesi dell'anno avevano cominciato a circolare voci sull'ingaggio in Toyota di Ralf Schumacher a partire dal 2005, trattativa confermata a luglio; poco dopo il team giapponese si accordò anche con Trulli.
Nonostante l'ingaggio dell'italiano non fosse stato ancora ufficializzato, a settembre Panis annunciò il suo ritiro dalla Formula 1, firmando un contratto biennale come tester alla Toyota.