伊豆諸島の南部、八丈島からは南に約180キロメートル[3]、青ヶ島からは南に約110キロメートルの太平洋上に位置する[4]。ベヨネーズ列岩と鳥島の中間にあたる。周辺には本島(須美寿島)のほか、東小島や北小島、さらに数個の岩礁がある[5]。本島は南北に長い突岩[1](カンラン石玄武岩)である。 八丈島と鳥島の間には海面下に6つのカルデラがあり、須美寿島はその一つのスミスカルデラの外輪山の一部である[6]。このカルデラの形成は少なくとも約20,000年前より古いと考えられている。須美寿島の北北東約7キロメートルの外輪山上には、白根と呼ばれる水深7.7メートルの浅瀬(暗礁)があり、後カルデラ火山の一つとされている[7]。カルデラの下にあるマグマが岩板を押し上げる形の海底地震が度々起き、津波を発生させる[2]。須美寿島の南方約20キロメートルには「南スミスカルデラ」という別のカルデラもある[6]。