1) Сначала обновим все По:
apt-get update
apt-get dist-upgrade
2) Установка Apache:
sudo apt-get install apache2
3) Установка php:
sudo apt-get install php5-common php5 libapache2-mod-php5 php5-cli php5-cgi php5-mysql
4) Установка mysql:
sudo apt-get install mysql-server mysql-client
После установки MySQL потребует задать пароль пользователя root для подключения к базам данных.
Вот и все, теперь можно заниматься настройкой этих пакетов.