Kozákov je horou plnou polodrahokamů a drahých kamenů. Vyskytují se tu ametysty, plivíny, záhnědy, citríny, chalcedony, acháty, jaspisy i karneoly. V jižním svahu Kozákova mohou návštěvníci po dohodě s majitelem Votrubcova lomu hledat, a pak si nález vybrousit v místní brusírně. Při silnici z Kozákova přes Bačov do Lestkova je několik výstavek těchto kamenů.