Como se le uma imagem.jpg em bytes retirando valores de zer

FileInputStream in = new FileInputStream(filePath);

for(int x=0;x<480; x++){			

for(int y=0; y<640; y++){

imagem[x][y] = (short) in.read();  	

System.out.println(“image”+ imagem[x][y]);

}

}

Estou armazenando os valores dentro de um vetor. Mas estou pegando valores fora do  padrao(RGB),  por exemplo  -1. Como faco pra extrair os valores corretamente ou seja de zero a 255.

Quem tiver alguma ideia, ou souber me de uma forca.  <img src="https://cdn.jsdelivr.net/gh/twitter/twemoji@14/assets/72x72/g.pngrin.png?v=9" title=":grin:" class="emoji" alt=":grin:">