根据水门神社的传说，曾经每晚在贵水门附近的海面上都会出现神光，被海浪冲到海滩上的就是惠比寿的雕像。据说看到这一幕的居民在港村和田浜牛岛建了神社来祭拜它。然而，在明王时代（1491-1500），发生了一场大潮，雕像被埋在沙子里。此后，居民将雕像移至西川岸町元美寿现址，据说于1523年6月23日被安奉在现址。 另外，吹上神社曾位于吹上三本松（现在的植松町南部），据说是在天正时代（1573年～1591年）供奉于此的。