Вообще, это не так сложно как кажется. Основная проблема в том, что те люди, которые имею революционные идеи для этого, не имеют денег на реализацию своих идей. А те, кто имеют деньги, реализуют только свои идеи, чтобы не делиться прибылью ни с кем. Вот он, главный тормоз прогресса. Условно такие игры называются "играми с кинематографической реальностью".
Но уже сейчас "куски" это виртуальной реальности вкраплены в нашу жизнь.
Вот, как пример. На сайтах знакомств уже получили распространение "электронные девушки", которые есть плод фантазии автора и компьютерной программы. Отличить их от реальных очень трудно. По сути, такая девушка фейк! Однако, для пользователей она вполне реальна и даже высылает свои фотки (естественно за деньги, иначе зачем она создана тут). И хорошо еще, что пока нет в широком доступе программ искусственного интеллекта, чтобы этот фейк заговорил нормальным языком!
Так что, реалистичные 3D игры уже созданы, частично и вкраплены в нашу жизнь. Играйте! Сжигайте ваше драгоценное реальное человеческое время жизни в дурмане придуманной реальности!
Но "в детстве" я мечтал не об этом. Я мечтал (и предлагал серьезным и ответственным людям) проект создания телеуправления производством. Чтобы школьник (или любой другой человек), придя домой и сделав домашнее задание, мог подключиться к бирже работ, выбрать, на каком производстве и кем он будет работать .. и на своем компьютере управлять роботом, станком, линией на реальном производстве! Идея в том, что виртуальная реальность должна приносить реальные материальные плоды людям! Об этом надо было думать еще тогда, в 60-х и раньше! А не сейчас, когда клюнул жареный петух коронавируса.
