白衣庵始建于民国初年,原在绵阳城南门口(今绵阳市红星街),由释能寿和尚作住持。有比丘尼4人,信众500余人,有观音殿和大雄宝殿,房屋14间。民国十七年(公元1928年),绵阳佛学社成立于此。解放后寺庙被占,女尼大多离散,有的还俗从事生产劳动,有的回到家里修行。
此前,白衣庵原建在绵阳市区内,在古绵州城中堪称名寺,为著名的“城中三庵,城外五观”之一。庵大约建于明代万历中期(公元1620年前后),地址在今卫生巷及顺城街口,在此地曾出土观音铜像一尊,高约三尺;出土韦驮塑像一尊,高约四尺。白衣庵大致毁于清嘉庆年间以后,因为州人孙文焕此时曾撰写过《重修白衣庵碑记》。民国28年(公元1939年)绵阳修新南门时,占了白衣庵的位置;上世纪九十年代初修红星街南段,又扩宽了街道,因此,在原地恢复白衣庵已不可能。绵阳寺庙虽多,却无庵堂,最早倡建白衣庵的是圣水寺果忍大师,居士王泽甲、苗志芳等人积极支持;仁山师(86岁)建议去成都找令徒昌果、昌惠、昌度、昌修承办;1992年6月居士陈秀姑、周惠芳前往文殊院请受道堂读佛学的高徒昌果(尼姑)来绵;由尹昌言、昌果等五人组成筹建小组,利用原南山寺山坡“十贤堂”旧址重建白衣庵;绵阳一环路的开通后,山门就在路旁,规模越建越大。