从考古资料来看，吴越文化的渊源可以推溯到旧石器文化时期。1985年春吴县(今苏州市吴中区)三山岛发现的一处旧石器时代文化遗址，是长江下游首次发现的旧石器地点，为研究吴越文化的起源提供了重要资料。
先秦至汉时期.早在春秋时代已有吴国和越国两个国家，在此期间互相争霸。但一直到汉朝，江南还处于落后的状态，一般时人对吴越文化的印象是粗犷，但又带有一定程度的审美观。
六朝至隋唐时期.自三国时起因有孙权建立的吴国，加上中原不断战乱，不少原居于黄河流域者纷纷南下，一直