用遮罩和扩散模型取代相机镜头 (arxiv.org)

这篇文章介绍了一种名为DifuzCam的全新相机设计，它用遮罩和扩散模型取代了传统的相机镜头。这种设计通过预先训练的扩散模型和控制网络，从传感器捕捉到的原始数据中重建图像，从而显著减小了相机尺寸和重量，并实现了高质量成像。此外，DifuzCam还可以利用场景的文本描述来进一步增强重建效果。