Comme vous le savez, Symfony 2 nécessitera au moins PHP 5.3.2 pour tourner.
Voici comment mettre à jour votre PHP :

ATTENTION - certaines fonctions PHP sont devenues obsolètes. Vous devez vous assurez que la mise à jour de posera pas de problème surtout si vous mettez à jour un serveur de production.

Ajoutez ces deux lignes dans votre fichier /etc/apt/sources.list deb

deb http://php53.dotdeb.org stable all
deb-src http://php53.dotdeb.org stable all

Lancez ensuite les commandes :
gpg --keyserver keys.gnupg.net --recv-key 89DF5277
gpg -a --export 89DF5277 | sudo apt-key add -
Puis, lancez la commande

sudo apt-get update

Puis

sudo apt-get install php5

Pour vérifier, lancez la commande :

php -v

Source : http://www.dotdeb.org/instructions/