Джефрис бей был назван в честь старшего партнера фирмы «Джеффри & Глендайннигс», которому принадлежал магазин, открытый в 1849 на месте нынешнего города. В конце 1960-х – начале 1970-х годов Джеффрис-Бей был популярным местом сбора хиппи серферов, что позволило ему вырасти из сонного маленького рыбацкого поселка в один из самых активно развивающихся городов страны. Джеффрис Бей столь привлекателен для любителей морских видов спорта — серфинга, погружения с аквалангом и дайвинга, ныряния с маской, прогулок и круизов на лодках, рыбалки, парусных видов спорта. Здесь  прекрасные километровые пляжи и лето круглый год. Сюда не зависимости от сезона приезжают местные жители и туристы, чтобы отдохнуть от городской суеты и вдохнуть свежий океанский бриз. Пляжи этого курортного города признаны безопасными и вода здесь теплая круглый год (средняя температура 24С). Здесь можно увидеть дельфинов и иногда даже китов, а самые любознательные могут заняться собирательством океанских ракушек прямо на пляже или же отправиться в национальный музей ракушек.