Reutilização de codigo?

basta pegar apenas as classes que tem as funcionalidades que vc quer reutilizar, colocar no classpath do novo projeto.

Aí vc instancia essa classe e utiliza seus métodos normalmente

Realmente estou muito no inicio. Como ficaria este procedimento no código e onde devem estar os arquivos?

Eles ficariam na mesma pasta onde os arquivos do seu projeto.

vamos supor que vc tenha uma classe ja pronta(o arquivo Teste.java):

public class Teste{

public int soma(int a, int b){

return a+b;
}
}

e vamos supor que em uma outra classe vc queira somar o valor de dois int`s e quer utilizar a sua classe Teste.

public static void main(String [] args){

Teste x = new Teste(); //aqui vc cria um objeto do tipo Teste(a sua classe).

//agora para utilizar o método soma() é só fazer a chamada =D
int resultadoSoma = x.soma(1,2);
System.out.Println(resultadoSoma);
}