Elmasın adının neden "kaşıkçı" olduğuna dair muhtelif rivayetler vardır ama elmasın oval kesiminden dolayı kaiığa benzediği için bu adla anıldığı en güçlü rivayet görünmektedir. "Kaşıkçı Elması"nın, birçok elmas uzmanı tarafından 19. yüzyıl başında kaybolan tarihi "Pigot Elması" olabileceği kanıtlanmaya çalışılsa da, bu elmasın 1680`lerin başında Saray Hazinesi`ne satın alma yoluyla girdiği biliniyor.