如何在notebook使用FiftyOne 可以開啟notebook?
僅包含不匹配的車輛預(yù)測的視圖。如果你正在使用本演示中的notebook版本,則將看到做出不匹配預(yù)測的最常見原因是標(biāo)簽不匹配。這并不奇怪,因為所有這三個類都在超類vehicle中。卡車和汽車在人工注釋和模型預(yù)測中常;煜。但是,除了容易混淆之外,讓我們來看一下我們的預(yù)測視圖中的前兩個示例。
圖片右側(cè)的截斷汽車的邊框太小。預(yù)測要準(zhǔn)確得多,但沒有達到IoU閾值。來自COCO 2017檢測數(shù)據(jù)集的原始圖像。COCO 2017檢測數(shù)據(jù)集:https://cocodataset.org/#detection-2017上面的圖片中發(fā)現(xiàn)的第一個樣本有一個注解錯誤。圖像右側(cè)的截斷汽車的真實值邊界框(粉紅色)太小。預(yù)測(黃色)更為準(zhǔn)確,但未達到IoU閾值。
樹木陰影下的汽車預(yù)測箱是正確的,但沒有在真實情況中標(biāo)出。在我們不匹配的預(yù)測視圖中找到的第二個樣本包含另一種注釋錯誤。實際上,這是一個更為嚴(yán)重的問題。圖像中正確預(yù)測的邊界框(黃色)沒有相應(yīng)的真實性。在樹蔭下的汽車根本沒有標(biāo)注。手動解決這些錯誤超出了本示例的范圍,因為它需要很大的反饋回路。FiftyOne致力于使反饋回路成為可能(且高效),但現(xiàn)在讓我們集中討論如何回答有關(guān)模型性能的問題,并確認(rèn)我們的模型確實經(jīng);煜财嚒⑿∑嚭涂ㄜ。我們將通過重新評估合并到單個vehicle標(biāo)簽中的公共汽車,小汽車和卡車的預(yù)測來做到這一點。下面的代碼創(chuàng)建了這樣一個視圖,將視圖克隆到一個單獨的數(shù)據(jù)集中,這樣我們將獲得單獨的評估結(jié)果,并評估合并的標(biāo)簽。vehicle_labels = {
label: "vehicle" for label in ["bus","car", "truck"]
}
merged_vehicles_dataset = (
vehicles
.map_labels("ground_truth", vehicle_labels)
.map_labels("predictions", vehicle_labels)
.exclude_fields(["tp_iou_0_75", "fp_iou_0_75", "fn_iou_0_75"])
.clone("merged_vehicles_dataset")
)
evaluate_detections(
merged_vehicles_dataset, "predictions", gt_field="ground_truth", iou=0.75)
session.dataset = merged_vehicles_dataset
僅包含從車輛視圖克隆的合并車輛的數(shù)據(jù)集,F(xiàn)在,我們獲得了原始分割的公交車,汽車和卡車檢測以及合并檢測的評估結(jié)果,F(xiàn)在,我們可以簡單地比較原始評估中的真陽性數(shù)與合并評估中的真陽性數(shù)。original_tp_count = vehicles.sum("tp_iou_0_75")
merged_tp_count = merged_vehicles_dataset.sum("tp_iou_0_75")
print("Original Vehicles True Positives: %d" % original_tp_count)
print("Merged Vehicles True Positives: %d" % merged_tp_count)
我們可以看到,在合并公共汽車、汽車和卡車標(biāo)簽之前,有1431個真陽性。將三種標(biāo)簽合并在一起產(chǎn)生了1515個真陽性結(jié)果。Original Vehicles True Positives: 1431
Merged Vehicles True Positives: 1515
我們能夠證實我們的假設(shè)!盡管很明顯。但是,我們現(xiàn)在有了以數(shù)據(jù)為基礎(chǔ)的理解,可以了解此模型的常見故障模式,F(xiàn)在,整個實驗可以與其他人共享。在notebook中,以下內(nèi)容將截屏最后一個活動的App窗口,因此其他人可以靜態(tài)查看所有輸出。session.freeze() # Screenshot the active App window for sharing
總結(jié)
notebook電腦已成為執(zhí)行和共享數(shù)據(jù)科學(xué)的流行媒體,尤其是在計算機視覺領(lǐng)域。但是,從歷史上看,使用視覺數(shù)據(jù)集一直是一個挑戰(zhàn),我們希望通過像FiftyOne這樣的開放工具來應(yīng)對這一挑戰(zhàn)。notebook革命在很大程度上仍處于起步階段,并將繼續(xù)發(fā)展并成為在社區(qū)中執(zhí)行和交流ML項目的更有說服力的工具,這在一定程度上歸功于FiftyOne!感謝你的關(guān)注!該FiftyOne項目上可以在GitHub上找到。

請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
推薦專題
- 1 UALink規(guī)范發(fā)布:挑戰(zhàn)英偉達AI統(tǒng)治的開始
- 2 北電數(shù)智主辦酒仙橋論壇,探索AI產(chǎn)業(yè)發(fā)展新路徑
- 3 “AI寒武紀(jì)”爆發(fā)至今,五類新物種登上歷史舞臺
- 4 降薪、加班、裁員三重暴擊,“AI四小龍”已折戟兩家
- 5 國產(chǎn)智駕迎戰(zhàn)特斯拉FSD,AI含量差幾何?
- 6 光計算迎來商業(yè)化突破,但落地仍需時間
- 7 東陽光:2024年扭虧、一季度凈利大增,液冷疊加具身智能打開成長空間
- 8 地平線自動駕駛方案解讀
- 9 封殺AI“照騙”,“淘寶們”終于不忍了?
- 10 優(yōu)必選:營收大增主靠小件,虧損繼續(xù)又逢關(guān)稅,能否乘機器人東風(fēng)翻身?