大同二年(807)弘法大師がこの地を訪れたとき、海で働く人々の無事と
豊漁を祈って延命地蔵尊を刻み、堂宇を建立して安置したことにはじまるという。
この本尊は秘仏で拝観できないが、「舵取り地蔵」の異名があり、
こんな霊験が伝えられている。
藩主山内一豊が室津の沖で嵐に遭って遭難しかかったときに、
一人の僧が現れて船を操り、無事に帰還できた。翌日津寺を訪れてみると、
本尊の地蔵菩薩はびしょ濡れであったという。