Global Patent Index - EP 4004670 A4

EP 4004670 A4 20230906 - SYSTEM AND METHOD FOR AUGMENTING A VISUAL OUTPUT FROM A ROBOTIC DEVICE

Title (en)

SYSTEM AND METHOD FOR AUGMENTING A VISUAL OUTPUT FROM A ROBOTIC DEVICE

Title (de)

SYSTEM UND VERFAHREN ZUR ERWEITERUNG EINER VISUELLEN AUSGABE EINER ROBOTERVORRICHTUNG

Title (fr)

SYSTÈME ET PROCÉDÉ POUR AUGMENTER UNE SORTIE VISUELLE D'UN DISPOSITIF ROBOTIQUE

Publication

EP 4004670 A4 20230906 (EN)

Application

EP 20844972 A 20200605

Priority

  • US 201962877792 P 20190723
  • US 201962877791 P 20190723
  • US 201962877793 P 20190723
  • US 201916570540 A 20190913
  • US 2020036428 W 20200605

Abstract (en)

[origin: US2021027097A1] A method for training a deep neural network of a robotic device is described. The method includes constructing a 3D model using images captured via a 3D camera of the robotic device in a training environment. The method also includes generating pairs of 3D images from the 3D model by artificially adjusting parameters of the training environment to form manipulated images using the deep neural network. The method further includes processing the pairs of 3D images to form a reference image including embedded descriptors of common objects between the pairs of 3D images. The method also includes using the reference image from training of the neural network to determine correlations to identify detected objects in future images.

IPC 8 full level

G06V 20/20 (2022.01); B25J 9/16 (2006.01); G06N 3/045 (2023.01); G06N 3/08 (2023.01); G06T 1/00 (2006.01); G06T 7/246 (2017.01); G06T 13/00 (2011.01); G06V 10/764 (2022.01); G06V 10/774 (2022.01); G06V 10/82 (2022.01); H04N 13/204 (2018.01)

CPC (source: CN EP US)

B25J 9/1605 (2013.01 - CN US); B25J 9/1661 (2013.01 - CN US); B25J 9/1664 (2013.01 - CN US); B25J 9/1671 (2013.01 - CN EP US); B25J 9/1697 (2013.01 - CN US); G06F 18/214 (2023.01 - CN US); G06F 18/28 (2023.01 - CN US); G06N 3/08 (2013.01 - CN EP US); G06T 7/248 (2016.12 - EP US); G06T 7/33 (2016.12 - US); G06T 7/55 (2016.12 - CN US); G06T 7/74 (2016.12 - CN US); G06T 19/20 (2013.01 - CN US); G06V 10/751 (2022.01 - US); G06V 10/764 (2022.01 - EP US); G06V 10/774 (2022.01 - US); G06V 10/82 (2022.01 - EP US); G06V 20/10 (2022.01 - US); G06V 20/20 (2022.01 - EP US); B25J 9/163 (2013.01 - US); B25J 9/1666 (2013.01 - EP); B25J 9/1697 (2013.01 - EP); G05B 2219/37567 (2013.01 - EP US); G05B 2219/40136 (2013.01 - EP); G05B 2219/40543 (2013.01 - EP US); G05B 2219/40564 (2013.01 - EP US); G06N 3/045 (2023.01 - EP); G06N 20/10 (2018.12 - EP); G06T 2200/04 (2013.01 - EP US); G06T 2207/10016 (2013.01 - EP US); G06T 2207/10024 (2013.01 - US); G06T 2207/10028 (2013.01 - EP US); G06T 2207/20081 (2013.01 - EP US); G06T 2207/20084 (2013.01 - EP); G06T 2207/20104 (2013.01 - US); G06V 10/774 (2022.01 - EP)

Citation (search report)

Designated contracting state (EPC)

AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

DOCDB simple family (publication)

US 11113526 B2 20210907; US 2021027097 A1 20210128; CN 114080583 A 20220222; CN 114080583 B 20231208; CN 114097004 A 20220225; CN 114127805 A 20220301; CN 114127806 A 20220301; EP 4003666 A1 20220601; EP 4003666 A4 20230906; EP 4003668 A1 20220601; EP 4003668 A4 20230906; EP 4004670 A1 20220601; EP 4004670 A4 20230906; EP 4004828 A1 20220601; EP 4004828 A4 20231018; JP 2022542239 A 20220930; JP 2022542241 A 20220930; JP 2022542858 A 20221007; JP 2022544007 A 20221017; US 11288883 B2 20220329; US 11580724 B2 20230214; US 11694432 B2 20230704; US 11741701 B2 20230829; US 2021023703 A1 20210128; US 2021023707 A1 20210128; US 2021027058 A1 20210128; US 2022165057 A1 20220526; US 2023154015 A1 20230518; WO 2021015868 A1 20210128; WO 2021015869 A1 20210128; WO 2021015883 A1 20210128; WO 2021016394 A1 20210128

DOCDB simple family (application)

US 201916570813 A 20190913; CN 202080050023 A 20200722; CN 202080050025 A 20200605; CN 202080050040 A 20200610; CN 202080050426 A 20200605; EP 20843022 A 20200722; EP 20844011 A 20200605; EP 20844806 A 20200610; EP 20844972 A 20200605; JP 2022503936 A 20200610; JP 2022503979 A 20200605; JP 2022503980 A 20200722; JP 2022503981 A 20200605; US 201916570540 A 20190913; US 201916570618 A 20190913; US 201916570852 A 20190913; US 2020036428 W 20200605; US 2020036450 W 20200605; US 2020037025 W 20200610; US 2020043144 W 20200722; US 202217667217 A 20220208; US 202318098625 A 20230118