> Aber wie mache ich das bei Unendlich
Dazu gibt es eine eigene Definition, die du in deinen Unterlagen nachschlagen solltest. Falls du deine Unterlagen gerade nicht zur Hand hast, hier die Kurzfassung:
Definition (Umgebung). Sei λ>0. Eine λ-Umgebung um eine Zahl z ist ein Intervall (z-λ, z+λ). Eine punktierte λ-Umgebung um eine Zahl z ist (z-λ, z+λ)\{z}.
Definition (Grenzwert). Seien x0, a Zahlen. Es gilt limx→x0 f(x) = a genau dann wenn zu jeder ε-Umgebung um a eine punktierte δ-Umgebung um x0 existiert, dessen Bild in der ε-Umgebung liegt.
Definition (Umgebung um ∞). Sei λ>0. Eine λ-Umgebung um ∞ ist ein Intervall (λ, ∞). Eine punktierte λ-Umgebung um ∞ ist (λ, ∞)\{∞}.
Definition (Uneigentliche Grenzwerte ). Seien x0, a Zahlen oder ∞. Es gilt limx→x0 f(x) = a genau dann wenn zu jeder ε-Umgebung um a eine punktierte δ-Umgebung um x0 existiert, dessen Bild in der ε-Umgebung liegt.
> Da darf ja eigenlich eben kein epsilon existieren?
Das irgendetwas nicht existiert reicht nicht. Man schaue sich zum Beispiel n·sin(n) an. Auch bei uneigentlichen Grenzwerten muss was existieren. Was das genau ist, sagt dir die Definition.