臉書開源自家AR核心技術,能快速識別影片中的物體

2021-09-13 01:25:23 字數 1041 閱讀 7901

facebook ai 研究院於日前開源由 python 語言編寫的基於深度學習框架 caffe2 的物體識別框架 detectron。其中包含多個重要且熱門的目標檢測演算法,detectron 能夠根據電腦視覺的任務,自動產生適合的模型。

臉書在去年 f8 大會上大秀 ar/vr 應用,尤其展示了多種在生活場景疊加的 ar 技術,今日開源的目標檢測框架detectron,可以快速在影片或中辨別出物體的形狀或邊緣,方便疊加影像。

detectron 專案於 2016 年 7 月啟動,當時的目標就是要在深度學習框架caffe2上,創造乙個快速且具有彈性的目標檢測系統,後來進入預覽的開發階段。在過去一年半的時間裡,detectron已經成熟並可以支援fair多數的專案,包括mask r-cnn 、focal loss for dense object detection,它們分別在2023年iccv 獲得 marr 獎和最佳學生**獎。這些由 detectron 支援的演算法為重要的計算機視覺任務(例如例項分割(instance segmentation))提供了直觀的模型,除此之外,detectron對於一些視覺感知系統也會有很大的幫助。

在臉書ai研究院內部,detectron已經用在多個專案中,像是feature pyramid networks for object detection、mask r-cnn、detecting and recognizing human-object interactions、focal loss for dense object detection、non-local neural networks, learning to segment every thing和data distillation: towards omni-supervised learning。

而臉書 ai 研究院將 detectron 開源的目的是,能夠讓 fair 的研究與大家分享,來加速全世界的研究成果。除了研究之外,臉書團隊用detectron,為不同的重要應用,訓練出定製化的模型,模型訓練完成後,即可通過輕量級且模組化的 caffe2 部署於雲端、移動裝置,臉書期望 detectron 能夠幫助發展出下一代的目標檢測技術。

大連哪個醫院**好

如何開源自己的專案

理解社群倉庫關係 註冊 建立專案,注意 如果期望社群最終索引和推廣你的作品,請使用ok.字首 安裝 tortoisehg 在本地轉殖專案倉庫,操作命令類似 在本地開發,使用hg ci 命令檢入 變更,定期使用hg push命令將穩定版本發布到 在你認為合適的時候,通過 郵件列表 bbs 管理委員會郵...

selenium登入臉書指定社團

from selenium import webdriver import time chrome path c selenium driver chrome chromedriver.exe chromedriver.exe執行檔所存在的路徑 username 你的臉書帳號 pwd 你的臉書密碼 ...

KDATFFS 開源自動化測試框架

因為前段時間有些閒暇時間,看了一些有關測試工具的開源專案,有了一些想法,也就有了kdatffs的誕生。kdatffs 作為乙個基於selenium的關鍵字驅動的開源自動化框架,其中包括 kdatffs,kdatffsrecorder,kdatffsrunner.kdatffs是框架的核心,kdatf...