Os robôs móveis são muito úteis em tarefas específicas onde apenas a sua mobilidade é necessária. Um desafio interessante na robótica móvel, é dotar estes robôs com a capacidade de interagir com objectos autonomamente, nomeadamente o acto de poder agarrar um objecto, movê-lo de posição, rodá-lo, colocar um objecto sobre outro, entre outras acções. Estas acções poderão ser feitas com um braço robótico manipulador, colocado sobre uma plataforma móvel, com uma garra no seu extremo para manipular objectos. Este braço deverá estar integrado no ambiente da plataforma móvel, e trabalhar em conjunto com esta, por forma a ser tomada a melhor decisão em conjunto quando é necessário agarrar e manipular um determinado objecto em linha de vista. Para tal, um sistema de visão por computador será necessário que poderá ser implementado agarrado ao braço, ou pela utilização do sistema de visão da plataforma móvel.
Os objectivos propostos são:
1- Desenvolvimento de um interface para interagir com braço e manipular objectos de uma forma remotamente controlada
2 - Criação de algoritmos de detecção e avaliação de objectos na imagem capturada pelo sistema de visão, bem como pela movimentação do braço e da garra até agarrar com sucesso o objecto
3 - Manipulação total do objecto, de forma autónoma, apenas seguindo a indicação por parte do utilizador que objecto na imagem se pretende manipular e que acção se pretende fazer