Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments
Descripción del Articulo
Los sistemas inteligentes son un área de las ciencias de la computación que busca resolver problemas complejos y multidisciplinares mediante el uso de un enfoque automático mediante la captura de información a partir de la cual puede realizar acciones y evaluar su resultado con el fin de aprender de...
Autor: | |
---|---|
Formato: | tesis doctoral |
Fecha de Publicación: | 2024 |
Institución: | Pontificia Universidad Católica del Perú |
Repositorio: | PUCP-Tesis |
Lenguaje: | inglés |
OAI Identifier: | oai:tesis.pucp.edu.pe:20.500.12404/29645 |
Enlace del recurso: | http://hdl.handle.net/20.500.12404/29645 |
Nivel de acceso: | acceso abierto |
Materia: | Innovaciones tecnológicas--Perú Inteligencia artificial--Aplicaciones Computadoras--Aplicaciones Robótica--Aplicaciones industriales https://purl.org/pe-repo/ocde/ford#2.00.00 |
id |
PUCP_e3ee3b0f970d57e9a9b3d7e474e9651d |
---|---|
oai_identifier_str |
oai:tesis.pucp.edu.pe:20.500.12404/29645 |
network_acronym_str |
PUCP |
network_name_str |
PUCP-Tesis |
repository_id_str |
. |
dc.title.en_EN.fl_str_mv |
Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments |
title |
Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments |
spellingShingle |
Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments Arce Cigüeñas, Diego Martín Innovaciones tecnológicas--Perú Inteligencia artificial--Aplicaciones Computadoras--Aplicaciones Robótica--Aplicaciones industriales https://purl.org/pe-repo/ocde/ford#2.00.00 |
title_short |
Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments |
title_full |
Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments |
title_fullStr |
Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments |
title_full_unstemmed |
Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments |
title_sort |
Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environments |
author |
Arce Cigüeñas, Diego Martín |
author_facet |
Arce Cigüeñas, Diego Martín |
author_role |
author |
dc.contributor.advisor.fl_str_mv |
Beltrán Castañón, Cesar Armando |
dc.contributor.author.fl_str_mv |
Arce Cigüeñas, Diego Martín |
dc.subject.es_ES.fl_str_mv |
Innovaciones tecnológicas--Perú Inteligencia artificial--Aplicaciones Computadoras--Aplicaciones Robótica--Aplicaciones industriales |
topic |
Innovaciones tecnológicas--Perú Inteligencia artificial--Aplicaciones Computadoras--Aplicaciones Robótica--Aplicaciones industriales https://purl.org/pe-repo/ocde/ford#2.00.00 |
dc.subject.ocde.none.fl_str_mv |
https://purl.org/pe-repo/ocde/ford#2.00.00 |
description |
Los sistemas inteligentes son un área de las ciencias de la computación que busca resolver problemas complejos y multidisciplinares mediante el uso de un enfoque automático mediante la captura de información a partir de la cual puede realizar acciones y evaluar su resultado con el fin de aprender de su experiencia y mejorar su desempeño y eficiencia. Estos sistemas pueden ser aplicados en robótica con fines de navegación autónoma, donde el uso de técnicas convencionales de control automático es muy complejo. Los temas con mayor potencial son el Aprendizaje por Refuerzo y el Aprendizaje Profundo, que a través de su combinación es posible resolver problemas de alta complejidad a partir del entrenamiento de marcos computacionales basados en recompensas por realizar una acción correcta o penalizaciones por acciones incorrectas. El proyecto de tesis está enfocado en dotar de la capacidad de navegación autónoma a un robot diferencial haciendo uso de una cámara de profundidad Lidar y técnicas de Aprendizaje Profundo por Refuerzo (DRL) para su uso en ambientes interiores con elementos no estacionarios. Para su desarrollo se realizará una revisión de los marcos DRL utilizados para navegación autónoma, a partir de los cuales se planteará el desarrollo de marcos basados en técnicas DRL para navegación autónoma de robots en ambientes interiores donde los elementos sean no estacionarios. Posteriormente, se propone la evaluación de los frameworks en plataformas virtuales para determinar su desempeño. Finalmente, se acondicionará una plataforma robótica con tracción diferencial y una cámara de profundidad Lidar para ser utilizada en una etapa de validación mediante experimentos en entornos reales. |
publishDate |
2024 |
dc.date.created.none.fl_str_mv |
2024 |
dc.date.accessioned.none.fl_str_mv |
2025-01-14T16:57:54Z |
dc.date.issued.fl_str_mv |
2025-01-14 |
dc.type.none.fl_str_mv |
info:eu-repo/semantics/doctoralThesis |
format |
doctoralThesis |
dc.identifier.uri.none.fl_str_mv |
http://hdl.handle.net/20.500.12404/29645 |
url |
http://hdl.handle.net/20.500.12404/29645 |
dc.language.iso.none.fl_str_mv |
eng |
language |
eng |
dc.relation.ispartof.fl_str_mv |
SUNEDU |
dc.rights.none.fl_str_mv |
info:eu-repo/semantics/openAccess |
dc.rights.uri.none.fl_str_mv |
http://creativecommons.org/licenses/by/2.5/pe/ |
eu_rights_str_mv |
openAccess |
rights_invalid_str_mv |
http://creativecommons.org/licenses/by/2.5/pe/ |
dc.publisher.es_ES.fl_str_mv |
Pontificia Universidad Católica del Perú |
dc.publisher.country.none.fl_str_mv |
PE |
dc.source.none.fl_str_mv |
reponame:PUCP-Tesis instname:Pontificia Universidad Católica del Perú instacron:PUCP |
instname_str |
Pontificia Universidad Católica del Perú |
instacron_str |
PUCP |
institution |
PUCP |
reponame_str |
PUCP-Tesis |
collection |
PUCP-Tesis |
bitstream.url.fl_str_mv |
https://tesis.pucp.edu.pe/bitstreams/e46c68c3-5dfc-49ad-8422-9e0d67513f40/download https://tesis.pucp.edu.pe/bitstreams/daf0dbf8-9503-4a27-bf31-98447af4cf21/download https://tesis.pucp.edu.pe/bitstreams/ae56f770-28f7-4e1f-8f90-d2455c9dd8c7/download https://tesis.pucp.edu.pe/bitstreams/228fa2d7-86a2-419d-9b41-e770a6fec36d/download https://tesis.pucp.edu.pe/bitstreams/2855816b-3fee-47a7-86d8-dfa82c0fcb89/download https://tesis.pucp.edu.pe/bitstreams/2da7b63d-7c91-444c-8120-692ce35072e1/download https://tesis.pucp.edu.pe/bitstreams/886a9621-6caf-4c56-8aed-9095f829e88f/download https://tesis.pucp.edu.pe/bitstreams/a1c8364d-81e9-44f1-886c-6b9fbdbf6447/download https://tesis.pucp.edu.pe/bitstreams/dbf4227e-b5ec-4087-97c8-9f3044aad36a/download https://tesis.pucp.edu.pe/bitstreams/a5dde8ee-f200-4f47-a6ca-0beaa5218632/download https://tesis.pucp.edu.pe/bitstreams/5e3db85a-3aed-4d1b-a532-8365b2d6d011/download https://tesis.pucp.edu.pe/bitstreams/91dd2f5f-2de1-4a56-8917-bc35da02bd98/download |
bitstream.checksum.fl_str_mv |
19cefcb6ad89e4a2ae75fd097110b469 9d9b50b4d307f15e920d5099ff9e5f5a bb9bdc0b3349e4284e09149f943790b4 48725b7f9a634bc551f52084693052d1 3fa2eeaf285c030900f2aef3904e7a6f 3aed056d2af7a80a3961de9a838759a2 d3c1b224f38c58110171ab4a7c10f480 5cdf7b6a79a7a4fee871ba17447ff73c 3fa2eeaf285c030900f2aef3904e7a6f 3aed056d2af7a80a3961de9a838759a2 d3c1b224f38c58110171ab4a7c10f480 5cdf7b6a79a7a4fee871ba17447ff73c |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 MD5 MD5 MD5 MD5 MD5 MD5 MD5 MD5 MD5 |
repository.name.fl_str_mv |
Repositorio de Tesis PUCP |
repository.mail.fl_str_mv |
raul.sifuentes@pucp.pe |
_version_ |
1834736867080142848 |
spelling |
Beltrán Castañón, Cesar ArmandoArce Cigüeñas, Diego Martín2025-01-14T16:57:54Z20242025-01-14http://hdl.handle.net/20.500.12404/29645Los sistemas inteligentes son un área de las ciencias de la computación que busca resolver problemas complejos y multidisciplinares mediante el uso de un enfoque automático mediante la captura de información a partir de la cual puede realizar acciones y evaluar su resultado con el fin de aprender de su experiencia y mejorar su desempeño y eficiencia. Estos sistemas pueden ser aplicados en robótica con fines de navegación autónoma, donde el uso de técnicas convencionales de control automático es muy complejo. Los temas con mayor potencial son el Aprendizaje por Refuerzo y el Aprendizaje Profundo, que a través de su combinación es posible resolver problemas de alta complejidad a partir del entrenamiento de marcos computacionales basados en recompensas por realizar una acción correcta o penalizaciones por acciones incorrectas. El proyecto de tesis está enfocado en dotar de la capacidad de navegación autónoma a un robot diferencial haciendo uso de una cámara de profundidad Lidar y técnicas de Aprendizaje Profundo por Refuerzo (DRL) para su uso en ambientes interiores con elementos no estacionarios. Para su desarrollo se realizará una revisión de los marcos DRL utilizados para navegación autónoma, a partir de los cuales se planteará el desarrollo de marcos basados en técnicas DRL para navegación autónoma de robots en ambientes interiores donde los elementos sean no estacionarios. Posteriormente, se propone la evaluación de los frameworks en plataformas virtuales para determinar su desempeño. Finalmente, se acondicionará una plataforma robótica con tracción diferencial y una cámara de profundidad Lidar para ser utilizada en una etapa de validación mediante experimentos en entornos reales.Intelligent systems are an area of computer science that seeks to solve complex and multidisciplinary problems by using an automatic focus by capturing information from which it can perform actions and evaluate its result in order to learn from its experience and improve its performance and efficiency. These systems can be applied in robotics for autonomous navigation purposes, where the use of conventional automatic control techniques is very complex. The topics with the greatest potential are Reinforcement Learning and Deep Learning, which through their combination is possible to solve highly complex problems from the training of computational frameworks based on rewards for taking a correct action or penalties for incorrect actions. The thesis project is focused on providing the autonomous navigation capacity to a differential robot making use of a Lidar depth camera and Deep Reinforcement Learning (DRL) techniques for use in indoor environments with non-stationary elements. For its development, a review of the DRL frameworks used for autonomous navigation will be carried out, from which the development of frameworks based on DRL techniques for autonomous robot navigation will be considered in indoor environments where elements are non-stationary. Subsequently, the evaluation of the frameworks in virtual platforms is proposed to determine its performance. Finally, a robotic platform with differential traction and a Lidar depth camera will be conditioned to be used in a validation stage through experiments in real environments.engPontificia Universidad Católica del PerúPEinfo:eu-repo/semantics/openAccesshttp://creativecommons.org/licenses/by/2.5/pe/Innovaciones tecnológicas--PerúInteligencia artificial--AplicacionesComputadoras--AplicacionesRobótica--Aplicaciones industrialeshttps://purl.org/pe-repo/ocde/ford#2.00.00Autonomous navigation of differential robot with depth camera and laser range finder using Deep Reinforcement Learning in non-stationary indoor environmentsinfo:eu-repo/semantics/doctoralThesisreponame:PUCP-Tesisinstname:Pontificia Universidad Católica del Perúinstacron:PUCPSUNEDUDoctor en IngenieríaDoctoradoPontificia Universidad Católica del Perú. Escuela de PosgradoIngeniería29561260https://orcid.org/0000-0002-0173-414046726472732028Cerrada Lozada, MarielaBeltran Castañon, Cesar ArmandoWolf, Denis FernandoMastrogiovanni, FulvioBarber, RamonPerez Zuñiga, Carlos Gustavohttps://purl.org/pe-repo/renati/level#doctorhttps://purl.org/pe-repo/renati/type#tesisORIGINALARCE_CIGÜEÑAS_DIEGO_MARTIN.pdfARCE_CIGÜEÑAS_DIEGO_MARTIN.pdfTexto completoapplication/pdf1965413https://tesis.pucp.edu.pe/bitstreams/e46c68c3-5dfc-49ad-8422-9e0d67513f40/download19cefcb6ad89e4a2ae75fd097110b469MD51trueAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdfARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdfReporte de originalidadapplication/pdf18883830https://tesis.pucp.edu.pe/bitstreams/daf0dbf8-9503-4a27-bf31-98447af4cf21/download9d9b50b4d307f15e920d5099ff9e5f5aMD52falseAdministratorREADLICENSElicense.txtlicense.txttext/plain; charset=utf-81748https://tesis.pucp.edu.pe/bitstreams/ae56f770-28f7-4e1f-8f90-d2455c9dd8c7/downloadbb9bdc0b3349e4284e09149f943790b4MD54falseAnonymousREADCC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-81025https://tesis.pucp.edu.pe/bitstreams/228fa2d7-86a2-419d-9b41-e770a6fec36d/download48725b7f9a634bc551f52084693052d1MD55falseAnonymousREADTEXTARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.txtARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.txtExtracted texttext/plain187128https://tesis.pucp.edu.pe/bitstreams/2855816b-3fee-47a7-86d8-dfa82c0fcb89/download3fa2eeaf285c030900f2aef3904e7a6fMD56falseAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.txtARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.txtExtracted texttext/plain16316https://tesis.pucp.edu.pe/bitstreams/2da7b63d-7c91-444c-8120-692ce35072e1/download3aed056d2af7a80a3961de9a838759a2MD58falseAdministratorREADTHUMBNAILARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.jpgARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.jpgGenerated Thumbnailimage/jpeg10907https://tesis.pucp.edu.pe/bitstreams/886a9621-6caf-4c56-8aed-9095f829e88f/downloadd3c1b224f38c58110171ab4a7c10f480MD57falseAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.jpgARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.jpgGenerated Thumbnailimage/jpeg8444https://tesis.pucp.edu.pe/bitstreams/a1c8364d-81e9-44f1-886c-6b9fbdbf6447/download5cdf7b6a79a7a4fee871ba17447ff73cMD59falseAdministratorREADTEXTARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.txtARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.txtExtracted texttext/plain187128https://tesis.pucp.edu.pe/bitstreams/dbf4227e-b5ec-4087-97c8-9f3044aad36a/download3fa2eeaf285c030900f2aef3904e7a6fMD56falseAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.txtARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.txtExtracted texttext/plain16316https://tesis.pucp.edu.pe/bitstreams/a5dde8ee-f200-4f47-a6ca-0beaa5218632/download3aed056d2af7a80a3961de9a838759a2MD58falseAdministratorREADTHUMBNAILARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.jpgARCE_CIGÜEÑAS_DIEGO_MARTIN.pdf.jpgGenerated Thumbnailimage/jpeg10907https://tesis.pucp.edu.pe/bitstreams/5e3db85a-3aed-4d1b-a532-8365b2d6d011/downloadd3c1b224f38c58110171ab4a7c10f480MD57falseAnonymousREADARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.jpgARCE_CIGÜEÑAS_DIEGO_MARTIN_T.pdf.jpgGenerated Thumbnailimage/jpeg8444https://tesis.pucp.edu.pe/bitstreams/91dd2f5f-2de1-4a56-8917-bc35da02bd98/download5cdf7b6a79a7a4fee871ba17447ff73cMD59falseAdministratorREAD20.500.12404/29645oai:tesis.pucp.edu.pe:20.500.12404/296452025-04-21 16:47:10.643http://creativecommons.org/licenses/by/2.5/pe/info:eu-repo/semantics/openAccessopen.accesshttps://tesis.pucp.edu.peRepositorio de Tesis PUCPraul.sifuentes@pucp.peTk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0IG93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLCB0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZyB0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sIGluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlIHN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yIHB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZSB0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQgdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uIGFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LCB5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZSBjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdCBzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkIHdpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRCBCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUgRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSCBDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZSBzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMgbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo= |
score |
13.949927 |
Nota importante:
La información contenida en este registro es de entera responsabilidad de la institución que gestiona el repositorio institucional donde esta contenido este documento o set de datos. El CONCYTEC no se hace responsable por los contenidos (publicaciones y/o datos) accesibles a través del Repositorio Nacional Digital de Ciencia, Tecnología e Innovación de Acceso Abierto (ALICIA).
La información contenida en este registro es de entera responsabilidad de la institución que gestiona el repositorio institucional donde esta contenido este documento o set de datos. El CONCYTEC no se hace responsable por los contenidos (publicaciones y/o datos) accesibles a través del Repositorio Nacional Digital de Ciencia, Tecnología e Innovación de Acceso Abierto (ALICIA).