Usa Boolean para verificar se está ativo ou não, se for true(Ativo) Executa, caso contrario return;
@Edit
Lembro que uma vez vi um plugin que o cara usava ArrayList para fazer isto, se o nick do player tivesse na arraylist de OFF ele retornava o evento, se não tivesse o código seria execultado, você poderia utilizar assim, é um método tosco, mais funciona.