Incluir dados no Excel ao clicar em botão sem sobrescrever arquivo apache poi

Sou iniciante em java e estou com uma duvida.
Estou estudando a API Apache POI, porém não estou conseguindo compreender como faço para incluir dados toda vez que clicar em um botão sem sobrescrever arquivo.