You're right, it is this chorus:

Und am Ende der Straße steht ein Haus am See.
Orangenbaumblätter liegen auf dem Weg.
Ich hab 20 Kinder meine Frau ist schön.
Alle kommen vorbei ich brauch nie rauszugehen.

And at the end of the street there's a house by the lake
Orange tree leaves lying on the path
I have 20 children, my wife is beautiful
Everyone comes to visit, I never have to leave the house.