Si Jonas se refería a que tenía una sesión de escritorio remoto con ventanas, y se preguntaba qué atajo de teclado abriría el Administrador de tareas en ese remoto, hay un atajo para eso (no mencionado aún en otras respuestas aquí):
altshifthome
Ya que mencionó el uso de ctrlaltdel, parece más enfocado a mostrar cómo hacer ESO en el remoto (con ventanas o no), o cómo abrir el Administrador de tareas de otras maneras en el remoto. Esas no son respuestas incorrectas, pero si Jonas (u otros lectores que encuentren esta entrada) se preguntan si existe tal atajo de teclado para una sesión RDP con ventanas, espero que esto ayude.
Tengo una entrada en el blog con aún más atajos de este tipo para un escritorio remoto “con ventanas”: Atajos de teclado útiles para trabajar con un Escritorio Remoto “con ventanas”: cambiar de ventana, más