黄泽山隶属岱山县衢山镇。位于衢山岛北约8.4公里处。东西长2.6公里，南北最宽处2.1公里，最窄处250米，陆域面积2.53平方公里，海岸线长15.74公里，最高点海拔164.1米。因该岛形似倒置的"入"字。岛西部岩上有天然裂缝成"五"字形，故曾名"五石山"。据传，清朝中期，曾居住黄姓人家，从此改名黄泽山。黄泽山，古称“黄石山”。