1.一種基于目標物體數字孿生的機械臂遙操作交互方法,其特征在于,包括以下步驟:
2.根據權利要求1所述的機械臂遙操作交互方法,其特征在于,步驟1中服務器利用獲取的圖像對場景中的物體進行識別的步驟如下:
3.根據權利要求2所述的機械臂遙操作交互方法,其特征在于,步驟1中服務器利用獲取的圖像對場景中的物體進行定位的步驟如下:
4.根據權利要求1所述的機械臂遙操作交互方法,其特征在于,步驟2中的相關信息包括:物體的類別、代表物體位置的三維坐標、代表物體姿態(tài)的四元數。
5.根據權利要求1所述的機械臂遙操作交互方法,其特征在于,步驟2中在hololens設備接收物體的相關信息后,便會以虛擬機械臂底座坐標系為參考坐標系,在虛擬場景的對應位置生成真實物體的數字孿生。
6.根據權利要求5所述的機械臂遙操作交互方法,其特征在于,在虛擬場景的對應位置生成真實物體的數字孿生的步驟如下:
7.根據權利要求1所述的機械臂遙操作交互方法,其特征在于,所述深度像機與服務器、rbg相機與服務器、機械臂與服務器均采用有線連接,服務器與hololens設備之間采用無線連接。
8.根據權利要求1所述的機械臂遙操作交互方法,其特征在于,服務器與hololens設備之間利用ros-tcp-connector和ros-tcp-endpoint實現通訊。