Понимаю, заголовок очень похож на кликбейт, но таковым не является. С другой стороны описана немного другая машина времени.
Всё просто, вот краткое описание требований для «машины времени»:
Старая фотография знакомого места.
Реставрация старой фотографии: добавить цветов в ч/б фото и возможно, атмосферности.
Оживление старой фотографии Minimax H3 и добавление одного или нескольких современных персонажей в старый оживленный мир.
Всего два небольших промпта. Ниже подробное описание магии с примером.
Ранее не связывался с генерацией видео, так как по примерам было видно, что времени отнимает много и видеокарту использует по полной, а секунд видео получается очень мало. С выходом LTX 2.3 попробовал сделать что-то из матрицы (еще до Шурика), начало видео получилось похожее на матрицу, человек и взмах - удар финт ноги, но после этого удара ногой тело перекручивает в что-то непонятное, как в самых первых, можно сказать условно, бредо-генераторах развалилась картинка.
С выходом новой модели генерации видео Minimax H3 решил разобраться повнимательней и даже повторить кусочек последнего интернет римейка Матрицы с Шуриком, в новых декорациях, с новыми героями - моими одноклассниками, попавшими на 40 лет назад. Оказалось, сделать какие то совместные фото одноклассников в образах Морфеуса и Нео не так то просто, постоянно где то перебор и неузнаваемое лицо, а еще сложнее, поместить их в фото прошлого без потери образов и лиц. Вполне возможно, что что-то не так делал, но промпт был на английском и инструкции по сохранению лиц одноклассников в промпте присутствовали.
По итогу, довольствовался тем, что просто отправил одноклассников в прошлое, без долгой обработки фото. Понадобилось одно отреставрированное фото - куда отправить и два фото - кого туда отправлять.
Для поиска до боли знакомого места использовал сайт pastvu. На выбранном фото - Калининский проспект из примерно 1986 года и экран на роддоме им. Грауэрмана, еще и с трансляцией выступления известного политика на экране, более атмосферней просто некуда.
Попробовал последнюю используемую модель для редактирования и создания фото Krea 2, восстановить старую фотографию с помощью универсального промпта, но похоже Krea 2 в реставрации и восстановлении - не очень. По итогу, отреставрировал в Qwen edit 2511. Единственная проблема Qwen edit - не способен отреставрировать все лица, если больше 4 лиц - начинались проблемы. Пример промпта для реставрации фотографии:
restore and colorize this photo, remove the stains, dust spots, noise, scratches and stripes from the image, fill in any gaps, ripped or torn sections, turning it into a high quality photograph, reversal film photography, remove stains and crease marks, repair gaps and fold or bends
Промпт для видео описал вкратце ,примерно так: «Два друга image1 и image2 внезапно попадают в прошлое image3, важно не менять ракурс image3, чтобы не поломалась картинка из прошлого.» Созданный промпт преобразовал с помощью GLM 5.2 в более подробное описание на английском языке. Получивщийся промпт для Minimax H3:
Static, locked-off camera shot. Two friends suddenly materialize in the center of the frame, looking around in astonishment and confusion as they realize they have traveled back in time to 1986.
Characters: Character 1 strictly maintains the exact facial features of @Image1. Character 2 strictly maintains the exact facial features and clothing outfit of @Image2. They stand close together, turning their heads to examine their surroundings with expressions of shock and wonder.
Background: The background strictly follows @Image3 — Kalininsky Prospect in 1986. A large outdoor screen is visible, displaying a broadcast of Mikhail Gorbachev giving a speech. Typical 1980s Soviet citizens are walking along the prospect.
Consistency constraints: It is absolutely crucial to keep all background buildings, the TV screen, and the walking pedestrians completely unchanged and identical to @Image3. The camera does not move at all. The 15-second video shows the two friends breathing and looking around while the 1986 city life continues normally around them. Cinematic lighting, photorealistic, 1986 Soviet atmosphere, temporal consistency.
Реставрировал фото и генеривал видео в Wan2GP. При генерации видео не получилось использовать стартовую картинку, один из героев не получался совсем, все три картинки добавлял вместе. Вполне возможно, показанные промпты подойдут и для других сервисов реставрации и генерации видео.
По итогу, отправил в прошлое несколько одноклассников и маму с сестрой, большинство из отправленных появились на свет в этом роддоме за экраном. Для примера, вставил картинки из видео, лица всех путешественников скрыл. Все отправленные в прошлое благополучно вернулись с массой позитивных впечатлений. Только сестра усомнилась в похожести лица, сказав, что похожа только одежда, но второе видео убедило ее в обратном.
Плюсы:
Вау эффект.
Очень реалистичная и натуральная игра перенесенных актеров.
Для видео достаточно всего пары фото, одного кадра актера и фото места.
Минусы:
Иногда, при движении лица узнаваемость падает.
Должна быть статичная камера(относительно фотографии прошлого), иначе местность может потеряться.
Оживленные пешеходы иногда делают лунную походку вперед ,неестественно скользит нога.
