本发明公开了一种用于人物动作识别的深度聚类方法，包括步骤：1)给定人物动作识别视频数据库提取的特征点数据集；2)构建多堆叠自编码器网络和深度神经网络组成的深度聚类网络；3)训练深度聚类网络；4)使用训练好的深度聚类网络进行聚类；5)使用聚类的结果构建词向量，用于人物动作识别。本发明联合多堆叠自编码器网络和深度神经网络组成深度聚类网络执行聚类任务，使用聚类中心软分配策略构建更好的词向量，有效提高人物动作识别的正确率。