Tossa de Mar geht auf eine Siedlung der Römer zurück. Einige der heute noch erhaltenen Gebäude der Altstadt, der "vila vella", und die Reste der Stadtmauer stammen aus dem Mittelalter.

Wegen der durch Berge eingeschlossenen Lage des Ortes sind die Baumöglichkeiten für Hotelanlagen und Ferienhäuser begrenzt. So hat Tossa seinen altertümlichen Charakter wahren können. Heute machen vor allem Familien hier Urlaub.