Sony работает над развитием технологии тактильной отдачи для контроллеров будущей консоли PS6. В новом патенте под названием «Система и способ обработки звука» описывается технология, которая выходит за рамки простого погружения: она использует внутриигровые звуки — в частности, издаваемые противниками, — чтобы помочь игроку быстрее реагировать на происходящее. 

Платформа распознаёт входящие звуковые сигналы и предоставляет игроку обратную связь, позволяя тому своевременно отреагировать.

«Звук анализируется для его классификации; при этом анализ выполняется ещё до того, как звук будет воспроизведен. Это необходимо, поскольку важные звуковые характеристики могут проявиться только в процессе воспроизведения — к тому моменту, когда визуально обозначить его будет уже слишком поздно», — отмечается в патенте. 

В видеоиграх присутствуют звуки разной природы, и данный патент описывает систему, которая определяет, какие именно ощущения должен вызвать у игрока тот или иной из них.

В зависимости от характера звука система может подавать различные сигналы. В дополнение к тактильной отдачи, сопровождающей внутриигровые звуки, она может задействовать светодиоды вокруг сенсорной панели, указывая направление источника звука, а также выводить на экран значки, фигуры или текстовые подсказки. В патенте приводится пример: «Скорость нарастания звука (атака) может влиять на яркость или насыщенность визуального элемента; громкость может определять цвет, прозрачность или яркость; а распознавание голосовых сигналов может привести к выбору определённого графического элемента, который, в свою очередь, будет дополнительно изменяться в зависимости от других характеристик звука». 

В патенте указано, что данная технология может применяться даже к тем играм, в которых изначально не предусмотрены подобные функции. В настоящее время тактильная отдача доступна только в специально поддерживающих её играх. Если в какой‑то игре не предусмотрена вибрация в качестве сигнала, платформа может предложить альтернативные варианты — например, визуальные индикаторы.

«Равным образом желательно предусмотреть подобные возможности для уже существующих, так называемых „устаревших“ (legacy) игр, чей программный код зафиксирован и с трудом поддаётся адаптации для внедрения таких технологий. Соответственно, вместо того чтобы реализовывать эти функции силами самой игры, их можно внедрить на уровне операционной системы или вспомогательного приложения, отслеживающего работу такой игры», — указано в патенте.

Пока неясно, как именно это отразится на уже существующих играх. Например, графический символ или текстовая подсказка на экране могут не вписаться в общую эстетику игры. 

Ранее Sony подала патентную заявку на использование искусственного интеллекта, который анализирует только что отображенный кадр и последние действия игрока (нажатия кнопок), чтобы спрогнозировать второй кадр — ещё до того, как консоль успеет отрисовать его по‑настоящему. Цель — обеспечить более плавный игровой процедура без задержек, характерных для других методов повышения частоты кадров.