Nonostante non fosse di sangue imperiale, riuscì a farsi nominare sessho , colui che prendeva le decisioni per l'imperatore se questo fosse stato minorenne e quindi non avesse potuto esercitare il potere, per il fatto che apparteneva all'ascendenza materna dell'imperatore.
Questa carica la ottenne ancor più facilmente perché prima che salisse al trono Seiwa, Yoshifusa ricopriva la carica di Dajo daijni, cioè era il Ministro degli Affari supremi, quindi ciò che potremmo definire il Primo Ministro.
Sebbene la carica di sessho esistesse già dal periodo Yamato , questa fu la prima volta che comparì nella scena politica, poiché tutti gli imperatori precedenti salirono al trono in maggiore età.
A tale scopo si era avvicinato alle famiglie nobili di secondo rango e aveva lasciato vacante il posto di kanpaku.