本发明公开了一种基于多任务深度学习的视频传输质量评价方法，该方法包括：构建多任务深度学习网络，用于完成目标识别、图像分类、图像质量评价任务，实现检测视频传输过程中的时延与卡顿等时域指标，检测传输画面失真类型、传输画面质量分数等空域指标；利用目标识别任务识别发送端、接收端视频帧中的频标并校验，根据频标检测出时延与卡顿等指标；利用目标识别任务定位接收端视频帧，并用图像分类任务检测传输画面失真类型，用图像质量评价任务检测传输画面质量分数；完成对网络的训练，得到训练模型，实际部署后可检测视频传输时延与卡顿，并在有延迟情况下检测传输画面失真类型与传输画面质量分数。