Hola. Sí tienes ahí la entrada de telefonía, pero no esperes ver un conector RJ (el típico). Sólo verás el par de cables y creo que una cajita blanca, pero sin ese tipo de conector.
En cuanto a lo de tirar cable a la habitación, creo que te puede salir mejor una solución inalámbrica instalando ahí mismo el router (dentro de ese hueco). Tienes alimentación pero está el cable pelado sin enchufe. Si no lo haces así, el único dormitorio al que te llega cable telefónico es el principal. Si lo quieres poner en otro, tendrás que tirar cableado, y es un problema, ya que por ley, no puedes meter otros cables por los conductos de cableado eléctrico, que son los únicos que hay. Es decir, toca hacer rozas.