전설에 따르면, 제주도를 만든 설문대 할망이 한라산이 뾰족하다고 꼭대기만 잘라 던져 백록담이 생겼다고 한다. 그리고 설문대할망이 던져버린 부분은 산방산이 되었다고 한다. 그런데 산방산 밑둘레가 절묘하게 한라산 정상 지름과 얼추 비슷하게 맞아떨어진다고 한다. 게다가 돌의 재질이 한라산 정상부와 마찬가지로 조면암이다. 한라산에서 잘라서 떨어졌다는 전설이 생긴 이유를 짐작할 수 있다. 다른 버전으로는 사냥꾼이 보이는 사슴을 잡고자 활을 쐈는데, 사슴은 피하고, 그게 옥황상제의 엉덩이를 맞추는 바람에, 열받은 상제가 그 한라산의 뽀족한 부분을 냅다 던져서 백록담이 만들어졌다고도 하고 사냥꾼을 발로 차버려서 패여 날아갔다는 이야기도 있다.
