越文化的概念随其相关疆域、政区与文化区的变化而异，不同时期、不同标准有不同含义，不可混淆。其中移民起着非常重要的作用。
如早期河姆渡文化、良渚文化并未延续发展，当时的居民估计基本已外迁。“大禹治水”的发生地被移至黄河中下游，与这种迁移不无关系。
商周之际中原人口的南迁对吴越文化的形成都有决定性的影响，而吴越相争期间的人口迁移使吴越文化交错融合，吴越两国先后扩张和由此引发的移民也导致吴越文化区的扩大。
秦始皇统一后由官方推行的移民，将北方移民安置于越文化区，再次强有力地注入中原文化。而因越人居住区的收缩，土著文化与新形成的越文化逐渐分离。
永嘉乱后持续百余年的北人南迁，逐渐扩展至越地，并成为当地主流文化。
安史之乱后的人口南迁虽然并不是以越地为重点，但五代期间吴越国的建立，对越地经济文化的进步还是起了促进作用，并有持续影响。
靖康之乱后大批北方人口南迁，绍兴是主要迁入地。因南宋设政治中心于杭州，绍兴的地位得到进一步加强。以绍兴为中心的二级行政区（南宋绍兴府，元绍兴路，明、清绍兴府）成为稳定的越文化区。
近代上海的兴起和杭州作为省会的行政中心作用，使绍兴部分文化精英外流，绍兴在一定程度上被边缘化，越文化的特色也在一定程度上被削弱，直到改革开放才有改变。
