如与鱼塘养殖有关,就不能认定为违法建筑。如对行政处罚不服,依法可申请复议,或直接提起行政诉讼。