Если ваша арка оборудования 64 бит, я бы пошел с 64-битной гостевой ОС. Это позволит гостю использовать 64-битную арку, где это возможно - источник.
Может появиться время, когда вы хотите перенести гостя на хост с большим количеством бара. Пребывание с 64-битной ОС позволит сделать это проще.
Вы упомянули, что ищете скорость. Вы используете гостя на хосте. Почему бы не установить обе версии 32 и 64 и проверить их как под нагрузкой. Это даст вам больше опыта в реальном мире.
Некоторые приложения с 32-разрядной версией не работают хорошо на 64-битной архитектуре, независимо от того, является ли ОС 32-битной или нет.