Varberg er beliggende i Halland regionen i sørvest Sverige og byen har en nesten 200 år gammel tradisjon som et feriested ved kysten. Den svenske kongen, Oscar II, forfatteren Verner von Heide Stam og Gustav Fröding, var berømt for å oppdage Varbergs mulighet som et feriested så tidlig.
Varberg er en gammel handelsby, som fra 1400 tallet til 1600 tallet ofte ble erobret av fiendtlige hærer. Etter avtale med Roskilde 1652 gik byen fra å være dansk til å være svensk. Byen kan virke annerledes fordi det har vært gjenoppbygget 5 forskjellige steder, hovedsakelig på grunn av ødeleggelsen av de danske vikingene.
Varberg ligger på et terreng med åser og sletter, og er mest uten vegetasjon og trær, men med stein og sand. Byens sandstrander er veldig populære om sommeren.