位於桃花島仙人嶺下的白雀寺，面朝塔灣金沙，相傳為觀世音菩薩得道前的出家修行地，是桃花島主要人文景觀之一​。白雀寺始建于後秦姚萇白雀年間（西元384—385年）。古人以白雀為瑞應的象徵，白雀集而吉祥至。相傳白雀年間白雀群集于父城故址——古槐之上，人們以為祥瑞而建起寺廟稱白雀寺。白雀寺所在的父城故址在春秋時代稱城父。城父是楚平王的兒子太子建的封邑。太子建是楚莊王的曾孫。太子建守城父期間曾設莊王祠，四時祭祀，所以後人就將城父楚莊王祠視作楚莊王故宅。明《正德汝州志》載：“白雀寺在父城保，世傳楚莊王故宅，有白雀之瑞，異槐一株。”所謂異槐者，是說白雀寺中古槐高大，人們從中抽出一板，上密佈雀形圖案。