Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments

Descripción del Articulo

Los sistemas inteligentes son un área de las ciencias de la computación que busca resolver problemas complejos y multidisciplinares mediante el uso de un enfoque automático mediante la captura de información a partir de la cual puede realizar acciones y evaluar su resultado con el fin de aprender de...

Descripción completa

Detalles Bibliográficos
Autor: Arce Cigüeñas, Diego Martín
Formato: tesis doctoral
Fecha de Publicación:2024
Institución:Pontificia Universidad Católica del Perú
Repositorio:PUCP-Tesis
Lenguaje:inglés
OAI Identifier:oai:tesis.pucp.edu.pe:20.500.12404/29645
Enlace del recurso:http://hdl.handle.net/20.500.12404/29645
Nivel de acceso:acceso abierto
Materia:Innovaciones tecnológicas--Perú
Inteligencia artificial--Aplicaciones
Computadoras--Aplicaciones
Robótica--Aplicaciones industriales
https://purl.org/pe-repo/ocde/ford#2.00.00
id PUCP_e3ee3b0f970d57e9a9b3d7e474e9651d
oai_identifier_str oai:tesis.pucp.edu.pe:20.500.12404/29645
network_acronym_str PUCP
network_name_str PUCP-Tesis
repository_id_str .
dc.title.en_EN.fl_str_mv Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments
title Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments
spellingShingle Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments
Arce Cigüeñas, Diego Martín
Innovaciones tecnológicas--Perú
Inteligencia artificial--Aplicaciones
Computadoras--Aplicaciones
Robótica--Aplicaciones industriales
https://purl.org/pe-repo/ocde/ford#2.00.00
title_short Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments
title_full Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments
title_fullStr Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments
title_full_unstemmed Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments
title_sort Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments
author Arce Cigüeñas, Diego Martín
author_facet Arce Cigüeñas, Diego Martín
author_role author
dc.contributor.advisor.fl_str_mv Beltrán Castañón, Cesar Armando
dc.contributor.author.fl_str_mv Arce Cigüeñas, Diego Martín
dc.subject.es_ES.fl_str_mv Innovaciones tecnológicas--Perú
Inteligencia artificial--Aplicaciones
Computadoras--Aplicaciones
Robótica--Aplicaciones industriales
topic Innovaciones tecnológicas--Perú
Inteligencia artificial--Aplicaciones
Computadoras--Aplicaciones
Robótica--Aplicaciones industriales
https://purl.org/pe-repo/ocde/ford#2.00.00
dc.subject.ocde.none.fl_str_mv https://purl.org/pe-repo/ocde/ford#2.00.00
description Los sistemas inteligentes son un área de las ciencias de la computación que busca resolver problemas complejos y multidisciplinares mediante el uso de un enfoque automático mediante la captura de información a partir de la cual puede realizar acciones y evaluar su resultado con el fin de aprender de su experiencia y mejorar su desempeño y eficiencia. Estos sistemas pueden ser aplicados en robótica con fines de navegación autónoma, donde el uso de técnicas convencionales de control automático es muy complejo. Los temas con mayor potencial son el Aprendizaje por Refuerzo y el Aprendizaje Profundo, que a través de su combinación es posible resolver problemas de alta complejidad a partir del entrenamiento de marcos computacionales basados en recompensas por realizar una acción correcta o penalizaciones por acciones incorrectas. El proyecto de tesis está enfocado en dotar de la capacidad de navegación autónoma a un robot diferencial haciendo uso de una cámara de profundidad Lidar y técnicas de Aprendizaje Profundo por Refuerzo (DRL) para su uso en ambientes interiores con elementos no estacionarios. Para su desarrollo se realizará una revisión de los marcos DRL utilizados para navegación autónoma, a partir de los cuales se planteará el desarrollo de marcos basados en técnicas DRL para navegación autónoma de robots en ambientes interiores donde los elementos sean no estacionarios. Posteriormente, se propone la evaluación de los frameworks en plataformas virtuales para determinar su desempeño. Finalmente, se acondicionará una plataforma robótica con tracción diferencial y una cámara de profundidad Lidar para ser utilizada en una etapa de validación mediante experimentos en entornos reales.
publishDate 2024
dc.date.created.none.fl_str_mv 2024
dc.date.accessioned.none.fl_str_mv 2025-01-14T16:57:54Z
dc.date.issued.fl_str_mv 2025-01-14
dc.type.none.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
dc.identifier.uri.none.fl_str_mv http://hdl.handle.net/20.500.12404/29645
url http://hdl.handle.net/20.500.12404/29645
dc.language.iso.none.fl_str_mv eng
language eng
dc.relation.ispartof.fl_str_mv SUNEDU
dc.rights.none.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.uri.none.fl_str_mv http://creativecommons.org/licenses/by/2.5/pe/
eu_rights_str_mv openAccess
rights_invalid_str_mv http://creativecommons.org/licenses/by/2.5/pe/
dc.publisher.es_ES.fl_str_mv Pontificia Universidad Católica del Perú
dc.publisher.country.none.fl_str_mv PE
dc.source.none.fl_str_mv reponame:PUCP-Tesis
instname:Pontificia Universidad Católica del Perú
instacron:PUCP
instname_str Pontificia Universidad Católica del Perú
instacron_str PUCP
institution PUCP
reponame_str PUCP-Tesis
collection PUCP-Tesis
bitstream.url.fl_str_mv https://tesis.pucp.edu.pe/bitstreams/e46c68c3-5dfc-49ad-8422-9e0d67513f40/download
https://tesis.pucp.edu.pe/bitstreams/daf0dbf8-9503-4a27-bf31-98447af4cf21/download
https://tesis.pucp.edu.pe/bitstreams/ae56f770-28f7-4e1f-8f90-d2455c9dd8c7/download
https://tesis.pucp.edu.pe/bitstreams/228fa2d7-86a2-419d-9b41-e770a6fec36d/download
https://tesis.pucp.edu.pe/bitstreams/2855816b-3fee-47a7-86d8-dfa82c0fcb89/download
https://tesis.pucp.edu.pe/bitstreams/2da7b63d-7c91-444c-8120-692ce35072e1/download
https://tesis.pucp.edu.pe/bitstreams/886a9621-6caf-4c56-8aed-9095f829e88f/download
https://tesis.pucp.edu.pe/bitstreams/a1c8364d-81e9-44f1-886c-6b9fbdbf6447/download
https://tesis.pucp.edu.pe/bitstreams/dbf4227e-b5ec-4087-97c8-9f3044aad36a/download
https://tesis.pucp.edu.pe/bitstreams/a5dde8ee-f200-4f47-a6ca-0beaa5218632/download
https://tesis.pucp.edu.pe/bitstreams/5e3db85a-3aed-4d1b-a532-8365b2d6d011/download
https://tesis.pucp.edu.pe/bitstreams/91dd2f5f-2de1-4a56-8917-bc35da02bd98/download
bitstream.checksum.fl_str_mv 19cefcb6ad89e4a2ae75fd097110b469
9d9b50b4d307f15e920d5099ff9e5f5a
bb9bdc0b3349e4284e09149f943790b4
48725b7f9a634bc551f52084693052d1
3fa2eeaf285c030900f2aef3904e7a6f
3aed056d2af7a80a3961de9a838759a2
d3c1b224f38c58110171ab4a7c10f480
5cdf7b6a79a7a4fee871ba17447ff73c
3fa2eeaf285c030900f2aef3904e7a6f
3aed056d2af7a80a3961de9a838759a2
d3c1b224f38c58110171ab4a7c10f480
5cdf7b6a79a7a4fee871ba17447ff73c
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
MD5
MD5
MD5
MD5
MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositorio de Tesis PUCP
repository.mail.fl_str_mv raul.sifuentes@pucp.pe
_version_ 1834736867080142848
spelling Beltrán Castañón, Cesar ArmandoArce Cigüeñas, Diego Martín2025-01-14T16:57:54Z20242025-01-14http://hdl.handle.net/20.500.12404/29645Los sistemas inteligentes son un área de las ciencias de la computación que busca resolver problemas complejos y multidisciplinares mediante el uso de un enfoque automático mediante la captura de información a partir de la cual puede realizar acciones y evaluar su resultado con el fin de aprender de su experiencia y mejorar su desempeño y eficiencia. Estos sistemas pueden ser aplicados en robótica con fines de navegación autónoma, donde el uso de técnicas convencionales de control automático es muy complejo. Los temas con mayor potencial son el Aprendizaje por Refuerzo y el Aprendizaje Profundo, que a través de su combinación es posible resolver problemas de alta complejidad a partir del entrenamiento de marcos computacionales basados en recompensas por realizar una acción correcta o penalizaciones por acciones incorrectas. El proyecto de tesis está enfocado en dotar de la capacidad de navegación autónoma a un robot diferencial haciendo uso de una cámara de profundidad Lidar y técnicas de Aprendizaje Profundo por Refuerzo (DRL) para su uso en ambientes interiores con elementos no estacionarios. Para su desarrollo se realizará una revisión de los marcos DRL utilizados para navegación autónoma, a partir de los cuales se planteará el desarrollo de marcos basados en técnicas DRL para navegación autónoma de robots en ambientes interiores donde los elementos sean no estacionarios. Posteriormente, se propone la evaluación de los frameworks en plataformas virtuales para determinar su desempeño. Finalmente, se acondicionará una plataforma robótica con tracción diferencial y una cámara de profundidad Lidar para ser utilizada en una etapa de validación mediante experimentos en entornos reales.Intelligent systems are an area of computer science that seeks to solve complex and multidisciplinary problems by using an automatic focus by capturing information from which it can perform actions and evaluate its result in order to learn from its experience and improve its performance and efficiency. These systems can be applied in robotics for autonomous navigation purposes, where the use of conventional automatic control techniques is very complex. The topics with the greatest potential are Reinforcement Learning and Deep Learning, which through their combination is possible to solve highly complex problems from the training of computational frameworks based on rewards for taking a correct action or penalties for incorrect actions. The thesis project is focused on providing the autonomous navigation capacity to a differential robot making use of a Lidar depth camera and Deep Reinforcement Learning (DRL) techniques for use in indoor environments with non-stationary elements. For its development, a review of the DRL frameworks used for autonomous navigation will be carried out, from which the development of frameworks based on DRL techniques for autonomous robot navigation will be considered in indoor environments where elements are non-stationary. Subsequently, the evaluation of the frameworks in virtual platforms is proposed to determine its performance. Finally, a robotic platform with differential traction and a Lidar depth camera will be conditioned to be used in a validation stage through experiments in real environments.engPontificia Universidad Católica del PerúPEinfo:eu-repo/semantics/openAccesshttp://creativecommons.org/licenses/by/2.5/pe/Innovaciones tecnológicas--PerúInteligencia artificial--AplicacionesComputadoras--AplicacionesRobótica--Aplicaciones industrialeshttps://purl.org/pe-repo/ocde/ford#2.00.00Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environmentsinfo:eu-repo/semantics/doctoralThesisreponame:PUCP-Tesisinstname:Pontificia Universidad Católica del Perúinstacron:PUCPSUNEDUDoctor en IngenieríaDoctoradoPontificia Universidad Católica del Perú. Escuela de PosgradoIngeniería29561260https://orcid.org/0000-0002-0173-414046726472732028Cerrada Lozada, MarielaBeltran Castañon, Cesar ArmandoWolf, Denis FernandoMastrogiovanni, FulvioBarber, RamonPerez Zuñiga, Carlos Gustavohttps://purl.org/pe-repo/renati/level#doctorhttps://purl.org/pe-repo/renati/type#tesisORIGINALARCE_CIGÜEÑAS_DIEGO_MARTIN.pdfARCE_CIGÜEÑAS_DIEGO_MARTIN.pdfTexto completoapplication/pdf1965413https://tesis.pucp.edu.pe/bitstreams/e46c68c3-5dfc-49ad-8422-9e0d67513f40/download19cefcb6ad89e4a2ae75fd097110b469MD51trueAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdfARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdfReporte de originalidadapplication/pdf18883830https://tesis.pucp.edu.pe/bitstreams/daf0dbf8-9503-4a27-bf31-98447af4cf21/download9d9b50b4d307f15e920d5099ff9e5f5aMD52falseAdministratorREADLICENSElicense.txtlicense.txttext/plain; charset=utf-81748https://tesis.pucp.edu.pe/bitstreams/ae56f770-28f7-4e1f-8f90-d2455c9dd8c7/downloadbb9bdc0b3349e4284e09149f943790b4MD54falseAnonymousREADCC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-81025https://tesis.pucp.edu.pe/bitstreams/228fa2d7-86a2-419d-9b41-e770a6fec36d/download48725b7f9a634bc551f52084693052d1MD55falseAnonymousREADTEXTARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.txtARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.txtExtracted texttext/plain187128https://tesis.pucp.edu.pe/bitstreams/2855816b-3fee-47a7-86d8-dfa82c0fcb89/download3fa2eeaf285c030900f2aef3904e7a6fMD56falseAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.txtARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.txtExtracted texttext/plain16316https://tesis.pucp.edu.pe/bitstreams/2da7b63d-7c91-444c-8120-692ce35072e1/download3aed056d2af7a80a3961de9a838759a2MD58falseAdministratorREADTHUMBNAILARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.jpgARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.jpgGenerated Thumbnailimage/jpeg10907https://tesis.pucp.edu.pe/bitstreams/886a9621-6caf-4c56-8aed-9095f829e88f/downloadd3c1b224f38c58110171ab4a7c10f480MD57falseAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.jpgARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.jpgGenerated Thumbnailimage/jpeg8444https://tesis.pucp.edu.pe/bitstreams/a1c8364d-81e9-44f1-886c-6b9fbdbf6447/download5cdf7b6a79a7a4fee871ba17447ff73cMD59falseAdministratorREADTEXTARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.txtARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.txtExtracted texttext/plain187128https://tesis.pucp.edu.pe/bitstreams/dbf4227e-b5ec-4087-97c8-9f3044aad36a/download3fa2eeaf285c030900f2aef3904e7a6fMD56falseAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.txtARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.txtExtracted texttext/plain16316https://tesis.pucp.edu.pe/bitstreams/a5dde8ee-f200-4f47-a6ca-0beaa5218632/download3aed056d2af7a80a3961de9a838759a2MD58falseAdministratorREADTHUMBNAILARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.jpgARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.jpgGenerated Thumbnailimage/jpeg10907https://tesis.pucp.edu.pe/bitstreams/5e3db85a-3aed-4d1b-a532-8365b2d6d011/downloadd3c1b224f38c58110171ab4a7c10f480MD57falseAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.jpgARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.jpgGenerated Thumbnailimage/jpeg8444https://tesis.pucp.edu.pe/bitstreams/91dd2f5f-2de1-4a56-8917-bc35da02bd98/download5cdf7b6a79a7a4fee871ba17447ff73cMD59falseAdministratorREAD20.500.12404/29645oai:tesis.pucp.edu.pe:20.500.12404/296452025-04-21 16:47:10.643http://creativecommons.org/licenses/by/2.5/pe/info:eu-repo/semantics/openAccessopen.accesshttps://tesis.pucp.edu.peRepositorio de Tesis PUCPraul.sifuentes@pucp.peTk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0IG93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLCB0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZyB0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sIGluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlIHN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yIHB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZSB0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQgdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uIGFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LCB5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZSBjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdCBzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkIHdpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRCBCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUgRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSCBDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZSBzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMgbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo=
score 13.949927
Nota importante:
La información contenida en este registro es de entera responsabilidad de la institución que gestiona el repositorio institucional donde esta contenido este documento o set de datos. El CONCYTEC no se hace responsable por los contenidos (publicaciones y/o datos) accesibles a través del Repositorio Nacional Digital de Ciencia, Tecnología e Innovación de Acceso Abierto (ALICIA).