Im gegebenen Intervall kannst du ja erst mal kürzen
f(x)=(x+2)/(x2-4) = (x+2)/((x-2)(x+2)) = 1/(x-2)
Nun müsste man wissen, was ihr über stetige Funktionen schon bewiesen habt.
Wenn du über die Definition gehen sollst, wähle ein xo im gegebenen Intervall und versuche dann die Behauptung mit Epsilon und Delta zu formulieren.
Danach sollst du das dann beweisen.