网络最开始使用卷积神经网络或全连接网络，目的是为了提取图像特征信息;对于atari游戏中，一般将连续帧图像放在一起作为一个state送到神经网络中;网络的输出是Q值