Darauf mit dem Wörtchen "nie" zu antworten (alternativ: Ich warte noch (nämlich bis in alle Ewigkeit) damit.) ist eine grammatikalisch durchaus passende Antwort.
Grammatikalisch richtig ist schon mal schön, semantisch passend wäre noch schöner – und meines Erachtens nicht optional.