虛擬建築安全助理 - 基於融合建築安全知識的多模態大型語言模型

創科方案 虛擬建築安全助理 - 基於融合建築安全知識的多模態大型語言模型
(編號: S-1943)
試驗項目
方案特點
  • 雙語多模態模型框架：低秩適應大小模型共適配器、組相對策略優化演算法及多階段課程強化學習損失函數
  • 雲端邊緣混合計算及分層推理演算法：小型模型於低階任務 (物件識別與定位)、大型模型於安全違規檢查
  • 智能體代理檢索增強生成：鏈式思考於物件視覺定位、自我修正並優化檢索查詢、多智能體驅動檢索準確度
  • 多階段自監督提示：初步置信度評分、多圖像間交叉自我驗證以強化答案、因果圖神經網絡感知風險根源
試驗應用及預期成果
  • 與渠務署共同確定試驗工地（如曾進行類似項目的石湖墟污水處理廠）、高風險區域、配置軟硬件、收集數據
  • 根據安全標準（如建造業議會高空工作安全手冊），與渠務署界定項目範疇（安全條例、評估指標和驗收標準）
  • 在渠務署試驗工地的視頻系統上部署插件程式，持續分析並累積過往視頻數據（如六個月），定期改善模型表現
  • 整合客製化用戶介面及即時警報裝置，在現有的智慧工地安全系統基礎上，提供更豐富的智能分析功能
  • 與渠務署確定項目成果的擁有權（如軟件授權、知識產權）、未來對系統維護的具體模式及後續的項目延伸
附加方案資料 250609_Proposal_HKUST_JackCheng.pdf
方案提供者資料
方案提供者:香港科技大學
地址:香港九龍清水灣香港科技大學土木及環境工程學系3575室(27-28號電梯)
聯絡人:鄭展鵬教授
職位:正教授兼副系主任
電話:51996561
電子郵件: cejcheng@ust.hk
網頁: https://ce.hkust.edu.hk/people/jack-chin-pang-cheng-zhengzhanpeng

有關上述創新科技解決方案的詳情，請聯絡方案提供者查詢。