Entendo que o objetivo do filtro anti-aliasing (AA) é evitar moiré. Quando as câmeras digitais surgiram pela primeira vez, era necessário um filtro AA para criar desfoque suficiente para evitar padrões de moiré. Naquela época, o poder dos processadores de câmera era muito limitado. Mas por que ainda é necessário colocar um filtro AA sobre o sensor nas modernas câmeras DSLR? Isso não poderia ser realizado com a mesma facilidade pelos algoritmos aplicados quando a saída do sensor está sendo desmembrada?Parece que o atual poder de processamento disponível na câmera permitiria isso agora muito mais do que alguns anos atrás. O atual processador Digic 5+ da Canon tem mais de 100 vezes o poder de processamento do processador Digic III, que diminui o poder das câmeras digitais mais antigas. Especialmente ao gravar arquivos RAW, o desfoque de AA não poderia ser feito no estágio de pós-processamento? Essa é a premissa básica da Nikon D800E, apesar de usar um segundo filtro para neutralizar o primeiro?
fonte
Respostas:
O alias é o resultado de padrões repetidos de aproximadamente a mesma frequência, interferindo entre si de uma maneira indesejável. No caso da fotografia, as frequências mais altas da imagem projetada pela lente no sensor cria um padrão de interferência (moiré neste caso) na grade de pixels. Essa interferência ocorre apenas quando essas frequências são aproximadamente as mesmas ou quando a frequência de amostragem do sensor corresponde à frequência da onda da imagem. Esse é o limite de Nyquist. Observe ... esse é um problema analógico ... o moiré ocorre devido à interferência que ocorre em tempo real no mundo real antes que a imagem seja realmente exposta.
Depois que a imagem é exposta, esse padrão de interferência é efetivamente "inserido". Você pode usar o software até certo ponto para limpar os padrões de moiré posteriormente, mas é minimamente eficaz quando comparado a um filtro físico de passa-baixo (AA) na frente do sensor. A perda de detalhes devido ao moiré também pode ser maior do que a perda para um filtro AA, pois o moiré é efetivamente dados sem sentido, onde detalhes levemente desfocados ainda podem ser úteis.
Um filtro AA foi projetado apenas para desfocar essas frequências no Nyquist, para que eles não criem nenhum padrão de interferência. A razão pela qual ainda precisamos de filtros AA é porque os sensores e lentes de imagem ainda são capazes de resolver com a mesma frequência. Quando os sensores melhoram ao ponto em que a frequência de amostragem do próprio sensor é consistentemente mais alta do que as melhores lentes em sua abertura ideal, a necessidade de um filtro AA diminui. A própria lente lidaria efetivamente com o desfoque necessário para nós, e os padrões de interferência nunca surgiriam em primeiro lugar.
fonte
A física simplesmente não funciona dessa maneira. O aliasing transforma irreversivelmente as frequências além do limite de Nyquist para aparecerem como frequências abaixo do limite, embora esses "aliases" não estejam realmente lá. Nenhuma quantidade de processamento de um sinal com alias pode recuperar o sinal original no caso geral. As explicações matemáticas sofisticadas são bastante longas, a menos que você tenha uma aula de teoria de amostragem e processamento de sinal digital. Se você tivesse, você não faria a pergunta. Infelizmente, a melhor resposta é simplesmente "Não é assim que a física funciona. Desculpe, mas você precisará confiar em mim nisso". .
Para tentar dar uma ideia aproximada de que o exposto acima pode ser verdade, considere o caso de uma foto de uma parede de tijolos. Sem um filtro AA, haverá padrões de moiré (que são na verdade os pseudônimos) fazendo as linhas de tijolos parecerem onduladas. Você nunca viu o edifício real, apenas a imagem com as linhas onduladas.
Como você sabe que os tijolos reais não foram colocados em um padrão ondulado? Você supõe que eles não eram do seu conhecimento geral de tijolos e da experiência humana de ver paredes de tijolos. No entanto, alguém poderia apenas fazer questão de deliberadamente criar uma parede de tijolos para que parecesse na vida real (quando vista com seus próprios olhos) como a imagem? Sim eles poderiam. Portanto, é possível distinguir matematicamente uma imagem com alias de uma parede de tijolos normal e uma imagem fiel de uma parede de tijolos deliberadamente ondulada? Não não é. Na verdade, você também não pode dizer a diferença, exceto que sua intuição sobre o que uma imagem provavelmente representa pode dar a impressão de que você pode. Novamente, estritamente falando, você não pode dizer se as ondas são artefatos de padrão ondulado ou são reais.
O software não pode remover magicamente as ondas porque não sabe o que é real e o que não é. Matematicamente, pode-se mostrar que não pode saber, pelo menos olhando apenas para a imagem ondulada.
Uma parede de tijolos pode ser um caso óbvio em que você pode saber que a imagem com alias está errada, mas há muitos casos mais sutis onde você realmente não sabe e pode nem estar ciente de que o alias está acontecendo.
Adicionado em resposta aos comentários:
A diferença entre colocar um alias em um sinal de áudio e em uma imagem é apenas que o primeiro é 1D e o segundo 2D. A teoria e qualquer matemática para realizar efeitos ainda são as mesmas, apenas que são aplicadas em 2D ao lidar com imagens. Se as amostras estiverem em uma grade retangular regular, como em uma câmera digital, surgirão outras questões interessantes. Por exemplo, a frequência da amostra é sqrt (2) mais baixa (cerca de 1,4x mais baixa) ao longo das direções diagonais, ao contrário das direções alinhadas ao eixo. No entanto, a teoria da amostragem, a taxa de Nyquist e o que realmente são os aliases não são diferentes em um sinal 2D do que em um sinal 1D. A principal diferença parece ser que isso pode ser mais difícil para aqueles que não estão acostumados a pensar no espaço de frequências para pensar e projetar o que tudo isso significa em termos do que você vê em uma imagem.
Novamente, não, você não pode "demosaic" um sinal após o fato, pelo menos não no caso geral em que você não sabe o que o original deveria ser. Os padrões de moiré causados pela amostragem de uma imagem contínua são aliases. A mesma matemática se aplica a eles, assim como se aplica a altas frequências, aliasing em um fluxo de áudio e soando como assobios de fundo. É o mesmo material, com a mesma teoria para explicar e a mesma solução para lidar com isso.
Essa solução é eliminar as frequências acima do limite de Nyquist antes da amostragem. Em áudio que pode ser feito com um simples filtro passa-baixo, você pode criar um resistor e um capacitor. Na amostragem de imagens, você ainda precisa de um filtro passa-baixo; nesse caso, ele absorve parte da luz que atingirá apenas um único pixel e a espalha em pixels vizinhos. Visualmente, isso parece um leve embaçamento da imagem antesé amostrado. O conteúdo de alta frequência parece detalhes finos ou bordas nítidas em uma imagem. Por outro lado, bordas nítidas e detalhes finos contêm altas frequências. São exatamente essas altas frequências que são convertidas em alias na imagem amostrada. Alguns aliases são o que chamamos de padrões moiré quando o original tinha algum conteúdo regular. Alguns aliases dão o efeito "degrau da escada" a linhas ou arestas, especialmente quando estão quase na vertical ou na horizontal. Existem outros efeitos visuais causados por aliases.
Só porque o eixo independente nos sinais de áudio é o tempo e os eixos independentes (dois deles porque o sinal é 2D) de uma imagem são a distância não invalida a matemática ou, de alguma forma, a diferencia entre sinais e imagens de áudio. Provavelmente porque a teoria e as aplicações de aliasing e anti-aliasing foram desenvolvidas em sinais 1D que eram voltagens baseadas no tempo, o termo "domínio do tempo" é usado para contrastar com o "domínio da frequência". Em uma imagem, a representação do espaço sem frequência é tecnicamente o "domínio da distância", mas, para simplificar o processamento do sinal, é frequentemente referido como "domínio do tempo". Não deixe que isso o distraia do que realmente é o apelido. E não, não há evidências de que a teoria não se aplique às imagens, apenas que às vezes é usada uma escolha enganosa de palavras para descrever as coisas devido a razões históricas. De fato, o atalho "domínio de tempo" aplicado ao domínio de não frequência de imagens é realmenteporque a teoria é a mesma entre imagens e sinais verdadeiros baseados no tempo. Alias é um alias, independentemente do eixo (ou eixos) independente.
A menos que você esteja disposto a investigar isso no nível de alguns cursos universitários sobre teoria de amostragem e processamento de sinais, no final, você terá que confiar naqueles que o têm. Algumas dessas coisas não são intuitivas sem uma base teórica significativa.
fonte
Você não pode obter o mesmo efeito no software. Você pode chegar a algum lugar próximo, dadas certas suposições. Mas o filtro AA espalha a luz de forma que atinja vários pixels coloridos diferentes, fornecendo informações ausentes do sensor de filtro sem AA.
A Nikon D800E não faz nada para tentar replicar o filtro AA. Se houver padrões de alta frequência na imagem, você terá mais moiré e esse é o seu problema - você precisa lidar com isso!
O alias é pior quando a frequência de detalhes na imagem está muito próxima da frequência de amostragem. Para câmeras mais antigas com sensores de baixa resolução (e, portanto, amostragem de baixa frequência), o moiré era um problema sério com muitos tipos de detalhes de imagem, portanto os filtros AA eram fortes (nada a ver com o poder de processamento limitado). Agora, temos frequências de amostragem muito mais altas, são necessários detalhes da imagem de frequência muito mais alta para que o moire seja exibido.
Eventualmente, as frequências de amostragem serão tão altas que os detalhes necessários dos objetos de alta frequência não ultrapassarão as aberrações das lentes e os efeitos de difração, tornando o filtro AA redundante. Esta é parcialmente a razão pela qual algumas partes traseiras da MF não possuem um filtro AA, super alta resolução e fotógrafos de moda que gostam de fotografar em f / 32 com as gigantes caixas de força Profoto que provam iluminação.
fonte
Todas essas são boas respostas e boas informações. Eu tenho uma explicação muito simplificada. Vamos de 2D para 1D (o mesmo conceito se aplica).
Quando uma frequência atinge o seu sensor mais alta que a "frequência máxima permitida", ela cria uma frequência de espelho no lado inferior . Após a amostragem da sua imagem, você verá esse sinal mais baixo, mas a câmera ou o computador não sabe se esse era um sinal mais baixo real que realmente estava lá ou se era um apelido criado a partir de um sinal muito alto. Esta informação está perdida. Essa é a razão da "frequência máxima permitida" ou da frequência nyquist. Diz que esta é a frequência mais alta que pode ser amostrada e, acima dela, as informações serão perdidas.
um analógico para o áudio: digamos que você tenha seu sistema configurado onde deseja uma faixa de frequência de 0hz a 1000hz. para deixar um pouco de espaço extra, você experimenta a 3000hz, o que torna seu niquista 1500hz. é aqui que entra o filtro aa. você não deseja que nada acima de 1500hz entre, na realidade, seu corte começará logo após 1000hz, mas você garante que, quando chegar a 1500hz, não restará nada.
vamos supor que você esqueça o filtro aa e permita que um tom de 2500 hz entre no seu sensor. ele se espelhará em torno da taxa de amostragem (3000 hz), para que seu sensor capte um tom de 500 hz (3000 hz - 2500 hz). agora que seu sinal foi amostrado, você não saberá se o 500hz estava realmente lá ou se é um apelido.
btw. as imagens no espelho acontecem para todas as frequências, mas não são um problema, desde que você não esteja acima do nyquist, pois é possível filtrá-las facilmente mais tarde. O tom de entrada de exemplo é 300 hz. você terá aliases em (3000 - 300 = 2700hz [e para corrigir também 3000 + 300 = 3300hz]). no entanto, como você sabe que está considerando apenas 1000 hz, eles serão facilmente removidos. então, novamente, o problema surge quando as imagens no espelho entram no espectro que você realmente deseja, porque você não será capaz de perceber a diferença e é isso que elas querem dizer com "assado".
espero que isto ajude
fonte