В конце 1980-х, будучи школьником, Ступа начал заниматься музыкой. Он возглавил Орловскую группу «Ночная трость». Одна из его песен привлекла внимание шотландской группы «The Exploited», которые назвали Ступу лучшим панком в России. Музыкант продолжал выступать в андеграундной среде, исполняя музыку в стиле классического рок-н-ролла, панка и heavy metal, при этом живя в России.