¿Por qué no hay modificador de visibilidad de subclase en Java?

En más de una ocasión me he encontrado deseando una visibilidad variable que no es posible en Java. Quería que ciertos miembros fueran visibles dentro de su propia clase y dentro de cualquier subclase, pero no para el resto del paquete o para el resto del mundo. En otras palabras, yo quería esto:

Modifier        Class     Package   Subclass  World
sub-class       Y         N         Y         N

Sin embargo, los diseñadores de Java solo me dieron esto :

Modifier        Class     Package   Subclass  World
public          Y         Y         Y         Y
protected       Y         Y         Y         N
no modifier     Y         Y         N         N
private         Y         N         N         N

El caso típico cuando quiero algo como esto es cuando se crea una clase abstracta. A veces yo find the abstract parent necesita acceso a ciertos miembros, pero los niños concretos también lo necesitan. Puedo darles este acceso haciendo que los miembros protected, pero eso abre la accesibilidad al resto del paquete cuando realmente no quiero.

Para ser completamente claro, sé que tal modificador es no posible en Java. Mi pregunta es ¿por qué no se incluye este modificador en Java? Me parece (a mí) que es un nivel de visibilidad más natural que protected o el predeterminado. Es la razón en la línea de que no es lo suficientemente importante para ser incluido, o está más relacionado con posibles efectos secundarios que no he considerado?