「一百零八塔」因塔數眾多且造型獨特，不僅在寧夏，在中國是古塔建築中唯一的大型古塔群。在塔群前方的黃河灘上，有著古寺廟的遺址以及兩座小磚塔，因為修建水壩而淹沒，古遺跡從此長埋水中。從小塔中清理出西夏時代的木刻版經文、絹質彩繪、陶制塔模、造像等古文物，說明自西夏起，此處就是一大規模的佛教活動場所。相傳，這裡也是楊門女將中的傑出人物穆桂英的「天門陣」「點將台」。

該塔群始建時為土坯塔，因年代久遠，已嚴重損壞，無參照標本以及復原的依據，看其形制應是元代所建。後來補修時，在其外層砌築了一層青磚，而成為磚砌塔。如十字折角須彌座、葫蘆式塔身，基本上還保持了土坯塔的部分原貌，外層塗以白灰，屬於喇嘛式的實心塔。

這座塔群總體佈局匠心獨具，為佛教的紀念塔，佛教中認為：人有一百零八種煩惱，為了去掉人生眾多的煩惱，善男信女戴的貫珠是一百零八顆，唸經要念一百零八遍。據說，來到此地的人們，只要拜了塔，就可消除煩惱，獲得吉祥和好運。