多路输入图像CNN

如何设计一个有多个输入图像的CNN，使得在最后一层的loss是这N个图像loss的平均？
具体的，在训练时，如果mini-batch是128， N是16，那么每次iteration是8次classification。