고려말의 전객령 김영이가 벼슬을 버리고 사위 장판윤공과 함께 고향에 내려와 이곳 기산에서 수석의 아름다운 경치를 시로 읊으며 여생을 즐겁게 하고 마음가짐을 고결하게 하였던 곳이라하여 자손들이 그 유지에 1764년 정자를 세우고 빙옥정이라 하였다. 빙옥이란 뜻은 옛날 중국 고사에 장인되는 낙광의 집과 사위 집 옥윤과의 정이 수정과 같이 맑고 얼음과 윤기나는 구슬에 비할 수 있기에 빙옥이라 이름한 것이다