조선 연산군 12년(1506) 훈구세력인 성희안과 박원종이 임사홍, 신수근 등과 결합하여 포악한 정치를 거듭하던 연산군을 왕위에서 몰아내고 진성대군을 왕으로 추대하는 중종반정이 일어났다. 중종반정이 성공하자 공신들은 중종의 부인인 신씨를 역적의 딸이라 하여 왕비 자리에서 물러나게 하고 장경왕후 윤씨를 왕비로 맞이하였다.

이러한 소식이 전해지자 당시 군수인 김정과 담양부사 박상, 문안현감 유옥 등이 결의하여 왕비의 자리에서 쫓겨난 단경왕후 신씨를 다시 왕비로 모시자는 상소를 올렸다. 이들은 관직에서 쫓겨날 것과 죽음을 각오하고 관직을 표시하는 도장(職印:직인)을 소나무가지에 걸었다. 그 후 이곳에 비각을 세워 삼인대라 하였다.