MobileNet: 5,347,520
MobileNet+fpn: 13,344,960
ResNet: 23,561,152
ResNet+fpn: 31,558,592
这里的MobileNet我为了和ResNet拉到一齐,在最后又加了一层CONV2D,将通道数提升到2048dim,在使用fpn最后输出通道数256dim,所以参数量会比原始MobileNet会多一些,原始MobileNet参数量大概在300多万,相比于两三千万的resnet,真的很轻量级,方便在移动端有更好的体验。 大模型有大模型的好处,小模型有小模型的有点,那该如何balance呢?——>知识蒸馏