Bug ao clicar os botões rapidamente

Bem galera, no netbeans estou criando um jogo da memória o problema é que quando clico no botão ele fica clicado e com cor verde esperando outro botão ser clicado, quando os dois são clicados e forem iguais eles ficam vermelho o problema é que se fizer isso mt rápido eles ficam sem cor