সনি এআই ফ্রেম জেনারেশনের পেটেন্ট নিয়েছে যা ভবিষ্যতের প্লেস্টেশন ফ্রেম আগে থেকে অনুমান করে

ভিডিও গেমে ফ্রেম জেনারেশন কৌশলের অন্যতম প্রধান সীমাবদ্ধতা হলো ইনপুট ল্যাগ, আর এই সমস্যা কমাতে সনি ইন্টারেক্টিভ এন্টারটেইনমেন্ট একটি ফ্রেম জেনারেশন পদ্ধতির পেটেন্ট পেয়েছে। "Generation Super Sampling" শিরোনামের এই নথিটি ২০২৬ সালের ১৫ অক্টোবর প্রকাশিত হয়েছে এবং এতে বর্ণনা করা হয়েছে, গেম ইঞ্জিন ছবি রেন্ডার করার আগেই এআই ব্যবহার করে ফ্রেম পূর্বাভাস দেওয়া যাবে।

NVIDIA DLSS ও AMD FSR-এর মতো বিদ্যমান ফ্রেম জেনারেশন প্রযুক্তি গ্রাফিকস কার্ডের তৈরি দুটি আসল ফ্রেমের মাঝখানে এআই-নির্মিত ফ্রেম বসায়। সিস্টেমকে দ্বিতীয় আসল ফ্রেমের জন্য অপেক্ষা করতে হয় বলে স্ক্রিনে ফ্রেম রেট বাড়লেও গেম খেলোয়াড়ের প্রতিক্রিয়ার সঙ্গে দ্রুত সাড়া দেয় না। NVIDIA Reflex-এর মতো প্রযুক্তি বিলম্ব কমায়, তবে একেবারে দূর করতে পারে না।

এনকোডার, ডিকোডার ও কন্ট্রোলার ইনপুট

সনির পদ্ধতিতে আগের ফ্রেমগুলো বিশ্লেষণ করে পরবর্তী ফ্রেমের পূর্বাভাস দেওয়া হয়, ফলে পরের আসল ফ্রেমের জন্য অপেক্ষা করতে হয় না। এটি দুটি নিউরাল নেটওয়ার্ক ব্যবহার করে: একটি এনকোডার, যা ইঞ্জিনের আউটপুটকে দৃশ্যের একটি সংক্ষিপ্ত উপস্থাপনায় রূপান্তর করে, এবং একটি ডিকোডার, যা সেই উপস্থাপনা ব্যবহার করে পূর্বাভাসিত ফ্রেম তৈরি করে।

পেটেন্টে বলা হয়েছে, মোশন ভেক্টর ও কন্ট্রোলারের কমান্ডও পূর্বাভাসে ভূমিকা রাখতে পারে। উদাহরণস্বরূপ, খেলোয়াড় জাম্প বোতাম চাপলে সিস্টেম সেই ইনপুট বিবেচনা করে চরিত্রের পরবর্তী অ্যানিমেশন ফ্রেম আগাম অনুমান করতে পারে। নথি অনুযায়ী, প্রাসঙ্গিক ইনপুটগুলো ১৫ মিলিসেকেন্ড বা তার কম সময়ের মধ্যে কিংবা দুই সেকেন্ডের কম আগে দেওয়া হয়ে থাকতে পারে। প্রশিক্ষণের সময় পূর্বাভাসিত ফ্রেমগুলোকে আসল ফ্রেমের সঙ্গে তুলনা করা হয় এবং পার্থক্যের ভিত্তিতে নেটওয়ার্কের প্যারামিটার সমন্বয় করা হয়।

নথিতে একসঙ্গে একাধিক ভবিষ্যৎ ফ্রেম তৈরি করে ইঞ্জিন পরবর্তী আসল ফ্রেম শেষ করার আগেই সেগুলো দেখানোর বিষয়ও আছে। এ ছাড়া "Algorithmic Frame Generation" নামে একটি নন-নিউরাল বিকল্পের কথাও বলা হয়েছে, যা মোশন ভেক্টর ও আগে রেন্ডার হওয়া ফ্রেম থেকে কৃত্রিম ফ্রেম তৈরি করে।

অমীমাংসিত প্রশ্ন

ধারণাটি স্ট্রিট ফাইটার ৬-এর মতো ফাইটিং গেমে ব্যবহৃত রোলব্যাক নেটকোডের সঙ্গে মেলে। সেখানে গেম খেলোয়াড়ের পরবর্তী পদক্ষেপ অনুমান করে এবং প্রয়োজনে গেমের অবস্থা সংশোধন করে। তবে ভুল অনুমান হলে দ্রুতগতির শুটার ও দ্রুত নড়াচড়া বা হঠাৎ ক্যামেরা পরিবর্তনযুক্ত অ্যাকশন গেমে দৃশ্যগত ত্রুটি দেখা দিতে পারে।

পেটেন্টে আসল গেম থেকে পাওয়া কোনো পরিমাপিত বিলম্ব বা ছবির মানের ফল নেই, এবং বর্তমান সিস্টেমে নেই এমন কোনো বিশেষ হার্ডওয়্যারের তালিকাও নেই। তাই এটি প্লেস্টেশন ৫ বা প্লেস্টেশন ৫ প্রো-তে আসবে, এমন নিশ্চয়তা মেলে না। কোন কনসোলে এটি ব্যবহৃত হতে পারে, কবে হতে পারে, কিংবা আদৌ বাণিজ্যিক ফিচার হবে কি না, সে বিষয়ে সনি এখনও কিছু জানায়নি।