Es gab schon einmal so ein Plugin, aber dieses wurde seit fast drei Jahren nicht mehr weiter entwickelt:
http://groups.csail.mit.edu/pag/continuoustesting/
Ich dachte, es gäbe noch mehr solche Projekte, aber es scheint so, dass es recht mager in der Gegend ist.