Obwohl der Köhlerberg in unmittelbarer Nähe zum Rupenberg und zur Grote Högt liegt, hat er eine klar ausgeprägte Kuppe. In nur wenigen Minuten ist er vom Parkplatz am Treppkesweg in Materborn zu erreichen.Man nimmt entweder den in der Parkplatzmitte im Winkel von 45 Grad in westlicher Richtung abzweigenden Weg oder man folgt zuerst dem Treppkesweg und biegt dann in den ersten Weg nach rechts ab (Nebengestell q). Der Basaltstein steht an der Schnittstelle der beiden genannten Wege am Fuß einer kleinen Baumgruppe.

Seinen Namen hat er von einem Meilerplatz des Köhlers.