本发明属于地质灾害防灾减灾技术领域，公开了一种面向视频监控端到端地质灾害自动识别方法、系统及应用，将视频输入H‑C3D网络提取特征，每16帧提取一个4096维3D特征，按时间序列组合为32*4096维特征；将视频弱监督分类，地质灾害视频为一类，非地质灾害视频为一类；搭建并训练地质灾害分类识别网络R‑Net得到训练模型；通过将特征转为异常分值来判断发生地质灾害的预警等级；将视频通过H‑C3D网络提取3D特征，按时间序列组合为32*4096维，组合特征送入训练好的R‑Net网络，随视频帧实时获取异常分值；将异常分值划分五个区间，得到发生地质灾害的预警级别。本发明实现自动判断地质灾害的预警级别。