En Microsoft Office 365 Pro en Windows 10, he encontrado dos formas diferentes de hacerlo, dependiendo de lo que te resulte más fácil.
La primera es seleccionar todo el texto de la celda y editar el espacio anterior y posterior para la parte superior e inferior en la pestaña Diseño (ver captura de pantalla), y ajustar las caretas de las reglas como se indicó anteriormente para la izquierda y la derecha.
La segunda opción es mover el ratón a la izquierda de la tabla hasta que el puntero del ratón se convierta en una flecha orientada hacia la derecha y luego hacer clic una vez para seleccionar toda la tabla. El menú Herramientas de la tabla se hace disponible. Haga clic en la pestaña azul oscuro de Diseño bajo Herramientas de la tabla (no en la pestaña azul medio más clara de Diseño para el documento en general) y luego haga clic en Márgenes de celda. Una vez que aparezca la ventana emergente de Márgenes de Celda (ver captura de pantalla) podrá editar la parte superior, inferior, izquierda y derecha.