一般教堂多是坐東朝西，諸聖教堂卻是座北北東朝南南西，面向正濱漁港的方向。主要牆體之外，於教堂的正後方與兩側，五處與主牆外側相連的扶壁結構 也清楚呈現。扶壁的主要功能在於支持主牆結構，讓建築更堅固。西班牙人在 亞洲建的教堂，除了宗教用途之外，通常也是敵人來襲時全村躲避禦敵之所， 因此多有扶壁設計。此外，扶壁也有防震的功能。扶壁以外，我們由東側突出的一小段牆可推測，教堂除了中殿之外，可能東側側邊另有房間，作為傳教士起居之用的修道院，也許為與教堂相連的複合建築。