La ermita de Sant Josep de Pego se encuentra dentro del casco urbano, en el Pla de la Font. Como las otras tres ermitas de Pego, se convirtió en foco de cristianización.
Pego se caracterizaba, como el resto de territorios durante la dominación musulmana, por estar dividido en alquerías que dependían de un castillo. Entre otras muchas alquerías existentes en Pego, en la de Atzeneta es donde se asienta la ermita de Sant Josep, que toma como base la mezquita que allí existía.
