虚拟建筑安全助理 - 基于融合建筑安全知识的多模态大型语言模型

创科方案 虚拟建筑安全助理 - 基于融合建筑安全知识的多模态大型语言模型
(编号: S-1943)
试验项目
方案特点
  • 双语多模态模型框架：低秩适应大小模型共适配器、组相对策略优化演算法及多阶段课程强化学习损失函数
  • 云端边缘混合计算及分层推理演算法：小型模型于低阶任务 (物件识别与定位)、大型模型于安全违规检查
  • 智能体代理检索增强生成：链式思考于物件视觉定位、自我修正并优化检索查询、多智能体驱动检索准确度
  • 多阶段自监督提示：初步置信度评分、多图像间交叉自我验证以强化答案、因果图神经网络感知风险根源
试验应用及预期成果
  • 与渠务署共同确定试验工地（如曾进行类似项目的石湖墟污水处理厂）、高风险区域、配置软硬件、收集数据
  • 根据安全标准（如建造业议会高空工作安全手册），与渠务署界定项目范畴（安全条例、评估指标和验收标准）
  • 在渠务署试验工地的视频系统上部署插件程式，持续分析并累积过往视频数据（如六个月），定期改善模型表现
  • 整合客制化用户介面及即时警报装置，在现有的智慧工地安全系统基础上，提供更丰富的智能分析功能
  • 与渠务署确定项目成果的拥有权（如软件授权、知识产权）、未来对系统维护的具体模式及后续的项目延伸
附加方案资料 250609_Proposal_HKUST_JackCheng.pdf
方案提供者资料
方案提供者:香港科技大学
地址:香港九龙清水湾香港科技大学土木及环境工程学系3575室(27-28号电梯)
联络人:郑展鹏教授
职位:正教授兼副系主任
电话:51996561
电子邮件: cejcheng@ust.hk
网页: https://ce.hkust.edu.hk/people/jack-chin-pang-cheng-zhengzhanpeng

有关上述创新科技解决方案的详情，请联络方案提供者查询。