Ende war der Sohn des surrealistischen Malers Edgar Ende (* 1901, † 1965) und wuchs in München auf. Der Einberufung zur Armee kurz vor Kriegsende 1945 entzog er sich durch Desertation. Drei Jahre später machte er seinen Schulabschluss an der Freien Waldorfschule in Stuttgart.