Alors oui et non.
La qualité prime d'abord. Il vaut mieux avoir une pierre d'excellente qualité (qualité gemme, par exemple), même si elle fait 1cm, qu'acheter la même pierre de moins bonne qualité (avec des impuretés, d'autres roches, moins transparente, etc...) de grosse taille.
Le mieux pour se rendre compte de la qualité, c'est souvent d'aller voir dans une foire aux minéraux et de voir les différences de prix pour une même pierre. Une énorme pierre peut avoir le même prix qu'une pierre qu'il faut prendre avec des pincettes.
Mais pour une même pierre, même qualité, alors oui, la taille aura une importance.