Попробуйте установить из хост-системы, а не с компакт-диска или DVD-диска. VMware 8 предоставляет вам возможность установки гостевой операционной системы из iso, расположенного где-то в операционной системе хоста. Я запускаю vmware в Windows 7 и располагаю ubuntu 10.4 iso в папке MyDocuments в Windows. Ubuntu установлен под VMWare без проблем.