assim acho que dá certo
<c:if condition="${ sessionContext.minhaLista is empty}">
Lista Vazia
</c:if>
no lugar do is tu pode usar eq também
cara, nada que um bom google possa te ajudar
http://java.sun.com/j2ee/1.4/docs/tutorial/doc/JSPIntro7.html
abraço