Skalní mlýn leží v místě spojení Suchého a Pustého žlebu. Vodní mlýn, který dal samotě název, byl postaven v letech 1763-1784 v osadě lesních dělníků a uhlířů. Využíval energii říčky Punkvy k mletí mouky. Později sloužil jako zdroj energie pro zpracování železné rudy. Na jeho místě je dnes restaurace a hotel Skalní mlýn s informačním střediskem a předprodejí vstupenek pro návštěvníky Punkevních jeskyní, Kateřinské jeskyně nebo propasti Macocha. Zajímavá je zde i lovecká chata "Salmovka" z 2. pol. 19. stol., postavená ve švýcarském slohu.
