相传很早以前有一对夫妻来此间修行,食山果,饮山泉,练就一身仙风道骨。忽一日,碧霞元君来此,夫妻二人遂欲拜碧霞元君为师。碧霞元君沉吟半响说道:“我以老象为题出一联,你们两人若对得上便收你二人为徒,若对不上就为我看管神象”。二人点头称是,碧霞元君遂吟出上联:“老象象象疑是真象实神象非凡象”。二人沉吟良久,未能对上。碧霞元君道:“你们何时对上何时收你二人为徒,现在你们只能为我护象了”。夫妻二人站立原地沉思,日久竟化作了现在的夫妻岩。