Originalmente, en el lugar donde se alza hoy el pabellón Sashizu-dō había un pabellón de la era Heian llamado Chūmon-dō, que fue incendiado en 1567 por la guerra entre los clanes Miyoshi y Matsunaga, al igual que el Pabellón del Gran Buda y durante largo tiempo no se realizó ninguna nueva construcción en el lugar. Cerca de cien años después, ya entrado en Período Edo, junto con el impulso que aportaba la tercera construcción del Pabellón del Gran Buda, comenzaron a edificarse en esta zona una serie de oficinas para la reconstrucción, como el Kanjin-sho. En aquella ocasión se levantó una construcción en cuya entrada había un gran tablón con esquemas dibujados, donde se indicaban las instrucciones (Sashizu) para la reconstrucción del Pabellón del Gran Buda, y este es el origen del nombre actual de Sashizu-dō. En 1791, debido a un tifón, este pabellón se desmoronó pero poco después un grupo de fieles de la rama budista Jōdo formalizó una petición ante el Tōdai-ji para reconstruirlo y, movido por el fervor de estos fieles, se procedió a la reconstrucción, que finalizó en 1852 dando lugar al edificio del Sashizu-dō actual.