材質にもよりますが、多くの仏壇の場合毛ばたきでやさしくほこりを払い、乾いた布で丁寧にふいてあげると良いでしょう。