Rillings künstlerisches Wirken ist in zahlreichen Einspielungen dokumentiert, u. a. dem gesamten Kantaten-, Orchester-und Chorwerk von Johann Sebastian Bach, daneben machte er sich auch als Interpret (unbekannterer) romantischer Werke (z. B. von Luigi Cherubini, Louis Hector Berlioz, Arrigo Boito) und zeitgenössischer Musik z. B. von Krzysztof Penderecki, Wolfgang Rihm, Sofia Gubaidulina und Arthur Honegger einen Namen. Für