物体检测 这么成熟的技术，用用百度的飞浆平台吧
看起来你只知道 yolo, 像 ssd, fastercnn 等一堆物体检测算法不清楚， 真的建议直接用平台，

百度家 easydl ， 自己标注好数据就可以。

此外你提到场景（比如施工和安全锥桶的关系）， 我要说明这个不是物体检测， 你需要把要求再仔细写清楚和想明白。