AMD, FPGA'lar için pahalı görüntü işlemcisini sessizce açık kaynak olarak yayınladı

Bazılarının düşündüğünün aksine, kamera görüntü sensörleri tek başlarına bitmiş renkli resimler yakalamaz. Renkli mozaik deseninin ardındaki ham piksel ızgaralarını yakalarlar. Kullanılabilir bir görüntü elde etmek için üreticiler genellikle, ham sensör verilerini şifreli kod aracılığıyla yapılandırılmış videoya dönüştürmek üzere tescilli ve pahalı görüntü sinyal işlemcilerine (ISP'ler) güvenirler. Tescilli ISP’ler gibi, Mini-ISP de tüm dönüştürme sürecini programlanabilir mantık içinde gerçekleştirir, ancak açık kaynaklı ve incelenebilir bir yapıya sahiptir. Bağlı ekranlarda doğal renkler üretmek için siyah seviyesi kalibrasyonu, tam RGB rengini yeniden oluşturmak üzere Bayer demosaicing işlemi, beyaz dengeleme ve global ton eşleme işlemlerini gerçekleştirir. AMD mühendisleri başlangıçta kodu sessizce yayınlamış olsa da, son güncellemeler Mini-ISP projesini gerçek dünya donanım tasarımlarına hazır bir pakete dönüştürmüştür.

Proje, görüntü işleme performansını artırmak için ticari IP'lerde yaygın olan gereksiz özellik yığınını reddetmesiyle de öne çıkmaktadır. Üçüncü taraf ISP çekirdekleri, ağır uzamsal yumuşatma filtrelerini çalıştırmak için rutin olarak binlerce FPGA mantık kapısı (LUT) ve DSP dilimi tüketir. Mini-ISP ise ağır gürültü giderme ve sonradan keskinleştirme işlemlerini tamamen ortadan kaldırır. Temel renk düzeltme ve piksel yeniden yapılandırmaya odaklanarak, çekirdek saat döngüsü başına 1, 2 veya 4 pikseli 500 MHz’e varan hızlarda işler. Bu hafif mimari, milisaniyenin altındaki boru hattı gecikmesiyle saniyede 2 Gigapiksel’e varan verim sunar.

Robotik geliştiricileri, drone tasarımcıları ve gömülü görüntü işleme araştırmacıları için AMD’nin sessizce piyasaya sürdüğü bu ürün, değerli bir görüntü işleme aracı sunuyor. Bu ürün, uygun maliyetli Spartan UltraScale+ veya Artix FPGA’ları kullanan geliştiricilerin, yüksek lisans ücretleri ödemeden özel kamera iş akışları oluşturmasına olanak tanıyor.