熊野古道・紀州路のルート、糸我稲荷神社から約0.4kmのところにあります。

藤原宗忠は、天仁2年（1109年）10月18日に有田川のかかる仮橋を渡って、伊止賀坂を上っていますが、王子の名の記載はなく、それから100年後、藤原定家は、後鳥羽上皇の熊野御幸に随行して「いとカ王子」に参っています。

糸我王子の正しく書かれたのは、藤原頼資（よりすけ）の日記で、修明門院（しゅめいもんいん）に随行して、承元4年（1210年）4月25日に参拝しています。

糸我王子社は近世には廃絶しており、江戸時代には、水王子社、上王子社があったが、明治時代に糸我稲荷神社に合祀しています。平成7年、愛郷会の人々により当地に再建されました。