Appena oltrepassato il portale Sanmon si trova il Chajo, letteralmente "posto per il tè". L'edificio veniva utilizzato come area di riposo comune dai laici che si prendevano cura del terreno del tempio. Lo stile dell'edificio è simile a quello degli altri edifici del Senjuji, con un grande frontone curvo sopra il suo ingresso. Attraverso l'ingresso ad arco si accede a un grande altare butsudan e ad un'area di culto. L'interno del Chajo è stato ristrutturato nel 2018 e comprende un'area spaziosa con tavoli e sedie, nonché tavoli bassi per sedersi direttamente sui tatami. Si incoraggia il pubblico a utilizzare questo spazio.

Il lato opposto dell'edificio era la zona adibita alla preparazione del tè e ospitava l'originale focolare da tè con due enormi bollitori incorporati. Su uno dei bollitori è inciso l'anno 1760. Si ritiene che sia il focolare che l'intero edificio siano stati costruiti in quell'anno. Fino agli anni '70 il tè veniva preparato in grandi bollitori e servito ai partecipanti alle funzioni religiose del Senjuji.