本发明涉及神经网络技术领域，公开了一种基于图像识别进行智能监控的方法及系统，本发明通过在智能监控系统中采集图像数据，生成热力图，搭建基于级联结构的的目标检测网络模型，根据热力图内的成像颜色和标注后的图像数据信息在图像数据样本中裁剪出对应区域，然后在特征收集网络模块中进行目标结构和目标密度的推理，进行分类识别和检测损失;最后在真实场景下的监控视频测试最优网络模型，完成基于图像识别的智能监控。本发明通过采用级联网络模型实现小目标检测任务，增强抗干扰力，从而提高模型的检测性能。