1960-luvun peruskartassa Olhavanlampi oli vielä tiettömän taipaleen takana. Jo tuohon aikaan Olhavan kallioiden maine toki tunnettiin. Kiipeilyharrastus oli alkamassa, mutta tavallisimmin kallion laelle kavuttiin polkua pitkin ihailemaan sieltä avautuvaa maisemaa. Lampi on myös mainio kalalampi, joskin sen ahven on pientä ja tummaa. Yllättäen vasta vuonna 2000 kallion seinämästä löytyi myös kalliomaalaus.