Нет никакого apt-cacher для окон, хотя вы могли бы так же легко проксировать подключение к Интернету с компьютера Windows на свой компьютер ubuntu. Это предполагает, что у вас есть доступ к администратору Windows, который вам понадобился бы для установки сервиса apt-cacher.
Ваш другой вариант - сделать зеркало apt, это включает загрузку всего ubuntu архив на ваш локальный компьютер (около 3 ГБ), который вы можете разместить в Windows через apache. Затем вы можете указать свою машину Ubuntu на нее.
Создайте новый каталог, переместите остальные файлы в новый каталог, удалите старый и переименуйте новый в старое имя.