PHP paraméter átadás néha miért nem működik?

Van egy szöveg, amit eltárolok a $sz változóban.

Meg akarok nyitni linken keresztül egy új oldalt, akkor a következőképpen teszem hogy átvigyem paraméterként a változót:

print '<a href="index.php?page=oldal&sz=$sz">';

Viszont néha nem akarja átadni a paramétert hanem csak konkrétan a "$sz" szöveget adja át, van hogy úgy sikerül ha hozzáfűzve adom meg:

print '<a href="index.php?page=oldal&sz='.$sz.'">';

Mikor melyik módon kell megadni? És mitől függ hogy így vagy úgy működik?