人眼类似于一个光学系统，但它不是普通意义上的光学系统，还受到神经系统的调节。人眼观察图像时可以用以下几个方面的反应及特性：
(1)从空间频率域来看，人眼是一个低通型线性系统，分辨景物的能力是有限的。由于瞳孔有一定的几何尺寸和一定的光学像差，视觉细胞有一定的大小，所以人眼的分辨率不可能是无穷的，HVS对太高的频率不敏感。
(2)人眼对亮度的响应具有对数非线性性质，以达到其亮度的动态范围。由于人眼对亮度响应的这种非线性，在平均亮度大的区域，人眼对灰度误差不敏感。
(3)人眼对亮度信号的空间分辨率大于对色度信号的空间分辨率。
(4)由于人眼受神经系统的调节，从空间频率的角度来说，人眼又具有带通性线性系统的特性。由信号分析的理论可知，人眼视觉系统对信号进行加权求和运算，相当于使信号通过一个带通滤波器，结果会使人眼产生一种边缘增强感觉一一侧抑制效应。
(5)图像的边缘信息对视觉很重要，特别是边缘的位置信息。人眼容易感觉到边缘的位置变化，而对于边缘的灰度误差，人眼并不敏感。
(6)人眼的视觉掩盖效应是一种局部效应，受背景照度、纹理复杂性和信号频率的影响。具有不同局部特性的区域，在保证不被人眼察觉的前提下，允许改变的信号强度不同。
人眼的视觉特性是一个多信道(Multichannel)模型。或者说，它具有多频信道分解特性(Mutifrequency channel decompositon )。例如，对人眼给定一个较长时间的光刺激后，其刺激灵敏度对同样的刺激就降低，但对其它不同频率段的刺激灵敏变却不受影响(此实验可以让人眼去观察不同空间频率的正弦光栅来证实)。视觉模型有多种，例如神经元模型，黑白模型以及彩色视觉模型等等，分别反应了人眼视觉的不同特性。Campbell和Robosn由此假设人眼的视网膜上存在许多独立的线性带通滤波器，使图像分解成不同频率段，而且不同频率段的带宽很窄。视觉生理学的进一步研究还发现，这些滤波器的频带宽度是倍频递增的，换句话说，视网膜中的图像分解成某些频率段，它们在对数尺度上是等宽度的。视觉生理学的这些特征，也被我们对事物的观察所证实。一幅分辨率低的风景照，我们可能只能分辨出它的大体轮廓；提高分辨率的结果，使我们有可能分辨出它所包含的房屋、树木、湖泊等内容；进一步提高分辨率，使我们能分辨出树叶的形状。不同分辨率能够刻画出图像细节的不同结构。