Der 28 km von Palma entfernt liegende Ort ist von Tälern mit Pinien- und Mandelbaumwäldern umgeben und blickt hinauf zum Puig de Galatos.
Nach seiner Rückeroberung durch Jaime I "el Conquistador" (den Eroberer) wurde der Ort durch Verteidigungstürme befestigt, um ihn vor den Angriffen der Berber zu schützen. Aus jener Zeit stammt die Son-Mas-Burg, die einen Turm aus dem 16. Jahrhundert besitzt. Die Kirche Santa María de Andraitx (18. Jh.) ist ebenfalls einen Besuch wert. In der Ortschaft findet man sowohl weiße und ockerfarbene Häuser als auch Wachttürme. In der Gemeinde von Andraitx liegt das Eiland Sa Dragonera, welches aufgrund seines hohen ökologischen Werts und seiner über zwanzig einheimischen Arten zum Naturpark erklärt wurde. Von den Stränden von Sant Elm aus genießt man einen herrlichen Blick auf diesen Naturraum, in dem auch eine Kolonie von Eleonorenfalken lebt.