1、對文物價值認識不足。一直以來，有些領導和有關部門視文物保護為包袱，為經濟建設和城市現代化建設的障礙，往往從眼前的經濟利益出發來衡量文物的價值。如古建築保護中有人認為這有損於城市建設的形象。在實際工作中，往往以一拆了之來對待文物保護，或者要算眼前的經濟帳，保護文物要花多少錢，而拆後搞開發能賺多少錢。不能充分認識到文物是祖先留給我們寶貴的精神財富，是千百年來形成的歷史文化沉澱。它不僅是我們進行愛國主義和革命傳統教育的`好素材，而且文物資源可直接或間接地為我縣經濟建設服務，是現代化建設中不可再生的寶貴財富。
2、缺乏文物保護意識。從我縣情況來看，全社會普遍缺乏文物保護意識，一些地方領導和幹部不重視文物保護工作，嚴重缺乏文物保護意識，認為文物保護是文物部門的事情，與當地政府無關，文物保護與否對其政績無任何關係，缺乏守土有責的責任意識。普通群眾則認為文物保護是政府的事情，與己無關，毫無顧忌地佔有出土文物，隨意地破壞文保單位的周邊環境風貌。如爵溪城牆非法建築時有發生，環境風貌遭到嚴重破壞。
3、文物依法行政力度不足。文物保護雖然有《文物保護法》可依，但由於《文物保護法》規定文物執法的主體不是文物部門，而是工商、公安、規劃等執法部門，由於沒有協調處理好相互之間關係，所以造成文物被破壞情況發生時，往往得不到有效遏制或被處理。如丹城赤坎遊仙寨遺址內建有非法廟宇和道路，文物部門無力處理，相關部門由於職責關係，相互推諉。
4、文物部門的保護力量相對薄弱。文物保護是一項既困難又複雜的工作，而文物部門既無權又無人，更缺乏經費，根本無力實施對許多該保護的文物實施保護。