Toda aplicação web Java precisa estar implantada em um servidor web ou servidor de aplicação. E como exemplo de tais servidores, temos o Tomcat(que pode ser instalado com o Netbeans, durante a instalação), o Glassfish (que é instalado por padrão no Netbeans), JBoss, Websphere e Jetty, entre outros…
Quando você cria uma aplicação web Java no Netbeans, mesmo que só crie HTML, ao rodar a aplicação, ele irá tratála como se fosse uma aplicação Java completa: irá iniciar o servidor, instalar a aplicação no servidor e abrir o navegador usando a URL da aplicação.
Se você estiver usando o Glassfish, pode instalar o Tomcat ou Jetty, que são bem mais leves. Porém., por estes dois serem apenas servidores Web, você não poderá usar recursos mais avançados do Java EE. Mas como esta começando, acredito que não é esse o caso.
Outra coisa que pode fazer é acessar a pasta da aplicação pelo windows explorer (ou equivalente, se estiver usando linux) e abrir os arquivos HTML diretamente no navegador.
Você tambpem poderia usar o Apache HTTP Server, mas sinceramente, nem compensa o trabalho.
Minha escolha? Usar Jetty ou tomcat e rodar a aplicação uma vez apenas, pra iniciar o servidor. A partir daí, é salvar o arquivo e recarregar no navegador.