調べた。
Java Build PathのLibrariesでjarを追加しておけば、Package Explorerに追加したjarが出てきてツリーで中身を見られるはず。
追加する前にjarの中身を確認したい、とかだったら、なんかプラグインを探さないといけないね。