Soller liegt inmitten des Tramuntanagebirges in einem sehr fruchtbaren Tal voller Orangen- und Zitronenpflanzungen. 
Rundum ist das Tal von Bergen umgeben, von denen sieben über tausend Meter hoch sind. 
Soller ist durch ein schmales Tal mit dem Hafen „Porto Soller“ verbunden, der in einer kilometerbreiten runden Bucht liegt. Sie ist von mehrstöckigen Hotels gesäumt, Hochhäuser gibt es hier nicht. 
Am Ende der Bucht liegt der Hafen mit einer kleinen, gewachsenen Siedlung und vielen Neubauten im Hinterland. 
Auf der gegenüberliegenden Seite vom Hafen liegt ein breiter Sandstrand, der zum Baden einlädt. Zwei weitere felsige Buchten sind auch zu Fuß zu errreichen.
Von Soller aus exisieren mehrere Wanderwege in die Berge, die allerdings ohne ortskundige Führer zum Teil nur schwer zu finden und zum Teil auch nur mit dem Führer zu begehn sind, da sie über Privatgelände führen, das nur zugelassenen Führern zugänglich ist.