Encoder assisted video frame rate up-conversion

Videoda çerçeve hız artırımı (ÇHA), devinim denkleştirme yöntemlerinin kullanılmasıyla hareketlerin daha keskin ve sürekli gösterimini sağlayarak görsel kaliteyi artırmaktadır. Fakat, devinim kestiriminde karşılaşılan problemler ÇHA başarımını etkileyen yapaylıklara neden olabilmektedir. Bu bildiride, kodlayıcı desteği ile kodçözücüdeki ÇHA art işleminin başarımını artıran bir yaklaşım önermekteyiz. Bu yaklaşımda, kodlayıcı, ÇHA sırasında yardımcı olabilecek yan bilgiyi türetip kodlayarak kodçözücüye göndermektedir. Kodçözücü, bu yan bilgiyi kullanarak ÇHA ile daha kaliteli çerçeveler sentezleyebilmektedir. Geliştirilen algoritma, ÇHA sırasında özellikle kapatmadan kaynaklanan yapaylıkları azaltarak önemli görsel kalite kazançları sağlamaktadır. Ayrıca çeşitli video içeriklerinde kodlayıcı destekli ÇHA ile sentezlenen çerçevelerin ortalama PSNR değerlerinin, aynı bithızında H.264 standardı ile kodlanan B-çerçevelere göre daha yüksek olduğu gözlenmiştir. With the use of motion compensation techniques, video frame rate up-conversion (FRC) achieves sharp and continuous motion representation and hence improves visual quality. However, motion estimation errors create artifacts that degrade the performance of FRC methods. In this paper, we propose to provide encoder assistance to improve the performance of FRC postprocessing at the decoder. In this approach, encoder generates and codes any side information that could assist the decoder during FRC. The decoder uses this side information to enhance the quality of the frames that are synthesized by FRC. The proposed algorithm improves the visual quality significantly by reducing artifacts especially in occluded regions. Also, for some video contents, frames that are synthesized by encoder assisted FRC have higher average PSNR when compared to H.264 encoded B-frames at the same bitrate. Publisher's Version