Vibrandsøy ligger vest i Haugesund kommune ute i den nordre innseilingen til den travle skipsleden gjennom Karmsundet.
Vibrandsøy ligger like vest for den tettbygde byøyen Hasseløy og adskilt fra denne av Vibrandsøysundet som er biled for skipstrafikken. Selv om Vibrandsøysundet er smalt er Vibrandsøy ikke landfast og her finnes ingen veier for biler. Vest for Vibrandsøy ligger Karmsundet og nordspissen av Karmøy med Vikjå og Storøy. Det som samlet omtales som Vibrandsøy er i egentlig en rekke mindre øyer som er delvis knyttet sammen av utfyllinger og småbruer. Disse er fra sør Vibrandsøy, Åkerøy, Varøy, Gardsøy og Sørhaugøy lengst nord. Sørspissen på Vibrandøy som ligger inne i Karmsundet heter Møllerodden. Omtrent all bebyggelse ligger på Vibrandsøy i sør. Dette er industribygninger på Møllerodden, større sjøhus inn mot Vibrandsøysundet og byen i øst og våningshus og skolehus på markene midt på øyen og rundt den lune viken Søre Løvågen i øst. Vibrandsøy og Åkerøy er helt fylt sammen med steinfyllinger og dekket av jorder og beitemark. Vest for Åkerøy og forbundet med denne med bro ligger Trollholmen kloss i skipsleden. Nord for Åkerøy ligger skogkledde Varøy. Inne i bassenget som dannes vest for Varøy og de to naboøyene ligger badeplassen Matlaug. Nordover Varøy og Gardsøy erstattes kulturlandskap og skog av fjellknauser og forblåst kystlandskap. Sørhaugøy lengst nord ligger ute i det åpne havstykket Slettå nord for Haugesund. Den er adskilt fra Gardsøy med et smalt sund og har ikke broforbindelse til de øvrige øyene. På Sørhaugøy ligger Sørhaugøy fyr, -som på folkemunne kalles Tonjer fyr ( Tonjer er en holme like nord for Sørhaugøy). Den karakteristiske, kirkelignende fyrbygningen ble nedlagt i 1952 og erstattet av elektrisk lykt.
Vibrandsøy inngikk i tidligere Torvastad kommune på Karmøy, men i forbindelse med en større kommunesammenslåing 1. januar 1965 der Torvastad og de øvrige kommunene på Karmøy ble slått sammen til én, større kommune, ble Vibrandsøy krets med 70 innbyggere overført til Haugesund kommune.