Villivuorella on oma sijaintinsa Merimaskun kulttuurihistoriassa. Myös jääkausi ja sen jälkeiset merivaiheet ovat jättäneet merkkejä Villivuoren luontoon. Jääkauden jälkeen Villivuori oli paljas ulkoluoto, mutta pronssikaudella 1500-300 eKr. alueella oli jo jonkin verran asutusta, josta todistavat muinaiset hautarauniot, hiidenkiukaat.