Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022
Descripción del Articulo
El trabajo realizado trata sobre la implementación de un Lakehouse para la optimización de flujos de datos debido a una baja performance de la plataforma actual de la empresa que ocasiona que procesos críticos de la misma no puedan ejecutarse en paralelo y demoren más tiempo del que puede esperar el...
| Autor: | |
|---|---|
| Formato: | tesis de grado |
| Fecha de Publicación: | 2025 |
| Institución: | Universidad Nacional Mayor de San Marcos |
| Repositorio: | UNMSM-Tesis |
| Lenguaje: | español |
| OAI Identifier: | oai:cybertesis.unmsm.edu.pe:20.500.12672/25987 |
| Enlace del recurso: | https://hdl.handle.net/20.500.12672/25987 |
| Nivel de acceso: | acceso abierto |
| Materia: | Arquitectura Optimización Empresa https://purl.org/pe-repo/ocde/ford#2.02.04 |
| id |
UNMS_2e3dd82ad368289d466436dc8d909032 |
|---|---|
| oai_identifier_str |
oai:cybertesis.unmsm.edu.pe:20.500.12672/25987 |
| network_acronym_str |
UNMS |
| network_name_str |
UNMSM-Tesis |
| repository_id_str |
410 |
| dc.title.none.fl_str_mv |
Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022 |
| title |
Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022 |
| spellingShingle |
Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022 Postigo Vega, Abel Sebastian Arquitectura Optimización Empresa https://purl.org/pe-repo/ocde/ford#2.02.04 |
| title_short |
Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022 |
| title_full |
Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022 |
| title_fullStr |
Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022 |
| title_full_unstemmed |
Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022 |
| title_sort |
Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022 |
| author |
Postigo Vega, Abel Sebastian |
| author_facet |
Postigo Vega, Abel Sebastian |
| author_role |
author |
| dc.contributor.advisor.fl_str_mv |
Espinoza Robles, Armando David |
| dc.contributor.author.fl_str_mv |
Postigo Vega, Abel Sebastian |
| dc.subject.none.fl_str_mv |
Arquitectura Optimización Empresa |
| topic |
Arquitectura Optimización Empresa https://purl.org/pe-repo/ocde/ford#2.02.04 |
| dc.subject.ocde.none.fl_str_mv |
https://purl.org/pe-repo/ocde/ford#2.02.04 |
| description |
El trabajo realizado trata sobre la implementación de un Lakehouse para la optimización de flujos de datos debido a una baja performance de la plataforma actual de la empresa que ocasiona que procesos críticos de la misma no puedan ejecutarse en paralelo y demoren más tiempo del que puede esperar el negocio. Además, al encontrarse la plataforma en un sistema on-premise no se podían almacenar más datos ya que se llegó al límite de disco que el equipo de tecnología podía manejar. El trabajo abarca la elección de herramientas entre los principales proveedores de tecnologías cloud, la definición de la arquitectura Lakehouse para la plataforma, la definición de un marco de trabajo que la subgerencia de datos utilizará para trabajar con las tecnologías escogidas de manera ordenada y escalable, la configuración de ambientes de desarrollo y producción y la habilitación del primer flujo de datos que servirá como base para poder migrar los demás flujos de datos más críticos de la empresa. De este modo, se logró implementar una plataforma de datos moderna, robusta, basada en la nube, que permite eliminar los límites de almacenamiento, reducir los trabajos de gestión de infraestructura sacando provecho a la tecnología serverless, que permite procesar grandes volúmenes de datos de manera paralela en tiempos cortos y que no bloquea los trabajos de los distintos analistas del negocio que trabajan con la data procesada. |
| publishDate |
2025 |
| dc.date.accessioned.none.fl_str_mv |
2025-05-05T20:52:57Z |
| dc.date.available.none.fl_str_mv |
2025-05-05T20:52:57Z |
| dc.date.issued.fl_str_mv |
2025 |
| dc.type.none.fl_str_mv |
info:eu-repo/semantics/bachelorThesis |
| format |
bachelorThesis |
| dc.identifier.citation.none.fl_str_mv |
Postigo, A. (2025). Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022. [Trabajo de Suficiencia Profesional de pregrado, Universidad Nacional Mayor de San Marcos, Facultad de Ingeniería de Sistemas e Informática, Escuela Profesional de Ingeniería de Software]. Repositorio institucional Cybertesis UNMSM. |
| dc.identifier.uri.none.fl_str_mv |
https://hdl.handle.net/20.500.12672/25987 |
| identifier_str_mv |
Postigo, A. (2025). Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022. [Trabajo de Suficiencia Profesional de pregrado, Universidad Nacional Mayor de San Marcos, Facultad de Ingeniería de Sistemas e Informática, Escuela Profesional de Ingeniería de Software]. Repositorio institucional Cybertesis UNMSM. |
| url |
https://hdl.handle.net/20.500.12672/25987 |
| dc.language.iso.none.fl_str_mv |
spa |
| language |
spa |
| dc.relation.ispartof.fl_str_mv |
SUNEDU |
| dc.rights.none.fl_str_mv |
info:eu-repo/semantics/openAccess |
| dc.rights.uri.none.fl_str_mv |
https://creativecommons.org/licenses/by-nc-sa/4.0/ |
| eu_rights_str_mv |
openAccess |
| rights_invalid_str_mv |
https://creativecommons.org/licenses/by-nc-sa/4.0/ |
| dc.format.none.fl_str_mv |
application/pdf |
| dc.publisher.none.fl_str_mv |
Universidad Nacional Mayor de San Marcos |
| dc.publisher.country.none.fl_str_mv |
PE |
| publisher.none.fl_str_mv |
Universidad Nacional Mayor de San Marcos |
| dc.source.none.fl_str_mv |
reponame:UNMSM-Tesis instname:Universidad Nacional Mayor de San Marcos instacron:UNMSM |
| instname_str |
Universidad Nacional Mayor de San Marcos |
| instacron_str |
UNMSM |
| institution |
UNMSM |
| reponame_str |
UNMSM-Tesis |
| collection |
UNMSM-Tesis |
| bitstream.url.fl_str_mv |
https://cybertesis.unmsm.edu.pe/bitstreams/667bfd2e-360a-477e-a5e9-52950f66bc65/download https://cybertesis.unmsm.edu.pe/bitstreams/ef5a3861-c634-489a-8984-a0e094a29c2d/download https://cybertesis.unmsm.edu.pe/bitstreams/32a7e286-14a8-4a9a-9172-867ca570b0b0/download https://cybertesis.unmsm.edu.pe/bitstreams/67fe6596-9495-4946-940a-2b1d1d2814e0/download https://cybertesis.unmsm.edu.pe/bitstreams/a4022c96-b6a4-4928-913f-a77d6150a065/download https://cybertesis.unmsm.edu.pe/bitstreams/faef36cc-712d-4d95-8387-b98ae0a65180/download https://cybertesis.unmsm.edu.pe/bitstreams/87feb68a-033d-4bcf-9592-10e946bfe1a9/download https://cybertesis.unmsm.edu.pe/bitstreams/26a2ac3c-02de-4ff8-8c42-0b5feac266dd/download https://cybertesis.unmsm.edu.pe/bitstreams/f2160c62-6650-4cbe-ab52-417af4752fce/download https://cybertesis.unmsm.edu.pe/bitstreams/d161708c-f696-4872-8a02-942598d0c343/download |
| bitstream.checksum.fl_str_mv |
d29ad1cd640feb45bf9df47b9122b480 465626766db9fd49d5962468307ee31c 20937c9feb4e91f7ceedad59cb8f719b bb9bdc0b3349e4284e09149f943790b4 61e4e110e7c9dc66b48e9d40a25918df 4d137d23ba5017dbf2f8dc7197c7a8ea 7e3e2864fdd66f20849766108c45446b 38ae84877b18eda7c551456e73a16d5a 339aff29d446742284e3370b118bddbf a4d9748004b9fc71fb2ccf163b92c507 |
| bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 MD5 MD5 MD5 MD5 MD5 MD5 MD5 |
| repository.name.fl_str_mv |
Cybertesis UNMSM |
| repository.mail.fl_str_mv |
cybertesis@unmsm.edu.pe |
| _version_ |
1868179407959490560 |
| spelling |
Espinoza Robles, Armando DavidPostigo Vega, Abel Sebastian2025-05-05T20:52:57Z2025-05-05T20:52:57Z2025Postigo, A. (2025). Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022. [Trabajo de Suficiencia Profesional de pregrado, Universidad Nacional Mayor de San Marcos, Facultad de Ingeniería de Sistemas e Informática, Escuela Profesional de Ingeniería de Software]. Repositorio institucional Cybertesis UNMSM.https://hdl.handle.net/20.500.12672/25987El trabajo realizado trata sobre la implementación de un Lakehouse para la optimización de flujos de datos debido a una baja performance de la plataforma actual de la empresa que ocasiona que procesos críticos de la misma no puedan ejecutarse en paralelo y demoren más tiempo del que puede esperar el negocio. Además, al encontrarse la plataforma en un sistema on-premise no se podían almacenar más datos ya que se llegó al límite de disco que el equipo de tecnología podía manejar. El trabajo abarca la elección de herramientas entre los principales proveedores de tecnologías cloud, la definición de la arquitectura Lakehouse para la plataforma, la definición de un marco de trabajo que la subgerencia de datos utilizará para trabajar con las tecnologías escogidas de manera ordenada y escalable, la configuración de ambientes de desarrollo y producción y la habilitación del primer flujo de datos que servirá como base para poder migrar los demás flujos de datos más críticos de la empresa. De este modo, se logró implementar una plataforma de datos moderna, robusta, basada en la nube, que permite eliminar los límites de almacenamiento, reducir los trabajos de gestión de infraestructura sacando provecho a la tecnología serverless, que permite procesar grandes volúmenes de datos de manera paralela en tiempos cortos y que no bloquea los trabajos de los distintos analistas del negocio que trabajan con la data procesada.application/pdfspaUniversidad Nacional Mayor de San MarcosPEinfo:eu-repo/semantics/openAccesshttps://creativecommons.org/licenses/by-nc-sa/4.0/ArquitecturaOptimizaciónEmpresahttps://purl.org/pe-repo/ocde/ford#2.02.04Implementación de un Lakehouse para la optimización de los flujos de datos usando herramientas GCP en una aerolínea en el 2022info:eu-repo/semantics/bachelorThesisreponame:UNMSM-Tesisinstname:Universidad Nacional Mayor de San Marcosinstacron:UNMSMSUNEDUIngeniero de SoftwareUniversidad Nacional Mayor de San Marcos. Facultad de Ingeniería de Sistemas e Informática. Escuela Profesional de Ingeniería de SoftwareIngeniería de Software08633326https://orcid.org/0000-0001-5671-592708633326612236Piedra Isusqui, José CésarAngulo Calderón, César Augustohttps://purl.org/pe-repo/renati/level#tituloProfesionalhttps://purl.org/pe-repo/renati/type#trabajoDeSuficienciaProfesional2562891532907109ORIGINALPostigo_va.pdfPostigo_va.pdfapplication/pdf5481788https://cybertesis.unmsm.edu.pe/bitstreams/667bfd2e-360a-477e-a5e9-52950f66bc65/downloadd29ad1cd640feb45bf9df47b9122b480MD51C1225_2025_Postigo_va_AUTORIZACION.pdfC1225_2025_Postigo_va_AUTORIZACION.pdfapplication/pdf196315https://cybertesis.unmsm.edu.pe/bitstreams/ef5a3861-c634-489a-8984-a0e094a29c2d/download465626766db9fd49d5962468307ee31cMD52C1225_2025_Postigo_va_REPORTE.pdfC1225_2025_Postigo_va_REPORTE.pdfapplication/pdf9594958https://cybertesis.unmsm.edu.pe/bitstreams/32a7e286-14a8-4a9a-9172-867ca570b0b0/download20937c9feb4e91f7ceedad59cb8f719bMD53LICENSElicense.txtlicense.txttext/plain; charset=utf-81748https://cybertesis.unmsm.edu.pe/bitstreams/67fe6596-9495-4946-940a-2b1d1d2814e0/downloadbb9bdc0b3349e4284e09149f943790b4MD54TEXTPostigo_va.pdf.txtPostigo_va.pdf.txtExtracted texttext/plain89911https://cybertesis.unmsm.edu.pe/bitstreams/a4022c96-b6a4-4928-913f-a77d6150a065/download61e4e110e7c9dc66b48e9d40a25918dfMD55C1225_2025_Postigo_va_AUTORIZACION.pdf.txtC1225_2025_Postigo_va_AUTORIZACION.pdf.txtExtracted texttext/plain3914https://cybertesis.unmsm.edu.pe/bitstreams/faef36cc-712d-4d95-8387-b98ae0a65180/download4d137d23ba5017dbf2f8dc7197c7a8eaMD57C1225_2025_Postigo_va_REPORTE.pdf.txtC1225_2025_Postigo_va_REPORTE.pdf.txtExtracted texttext/plain2088https://cybertesis.unmsm.edu.pe/bitstreams/87feb68a-033d-4bcf-9592-10e946bfe1a9/download7e3e2864fdd66f20849766108c45446bMD59THUMBNAILPostigo_va.pdf.jpgPostigo_va.pdf.jpgGenerated Thumbnailimage/jpeg14805https://cybertesis.unmsm.edu.pe/bitstreams/26a2ac3c-02de-4ff8-8c42-0b5feac266dd/download38ae84877b18eda7c551456e73a16d5aMD56C1225_2025_Postigo_va_AUTORIZACION.pdf.jpgC1225_2025_Postigo_va_AUTORIZACION.pdf.jpgGenerated Thumbnailimage/jpeg22424https://cybertesis.unmsm.edu.pe/bitstreams/f2160c62-6650-4cbe-ab52-417af4752fce/download339aff29d446742284e3370b118bddbfMD58C1225_2025_Postigo_va_REPORTE.pdf.jpgC1225_2025_Postigo_va_REPORTE.pdf.jpgGenerated Thumbnailimage/jpeg8780https://cybertesis.unmsm.edu.pe/bitstreams/d161708c-f696-4872-8a02-942598d0c343/downloada4d9748004b9fc71fb2ccf163b92c507MD51020.500.12672/25987oai:cybertesis.unmsm.edu.pe:20.500.12672/259872025-05-18 03:13:34.812https://creativecommons.org/licenses/by-nc-sa/4.0/info:eu-repo/semantics/openAccessopen.accesshttps://cybertesis.unmsm.edu.peCybertesis UNMSMcybertesis@unmsm.edu.peTk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0IG93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLCB0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZyB0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sIGluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlIHN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yIHB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZSB0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQgdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uIGFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LCB5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZSBjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdCBzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkIHdpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRCBCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUgRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSCBDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZSBzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMgbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo= |
| score |
12.821158 |
Nota importante:
La información contenida en este registro es de entera responsabilidad de la institución que gestiona el repositorio institucional donde esta contenido este documento o set de datos. El CONCYTEC no se hace responsable por los contenidos (publicaciones y/o datos) accesibles a través del Repositorio Nacional Digital de Ciencia, Tecnología e Innovación de Acceso Abierto (ALICIA).
La información contenida en este registro es de entera responsabilidad de la institución que gestiona el repositorio institucional donde esta contenido este documento o set de datos. El CONCYTEC no se hace responsable por los contenidos (publicaciones y/o datos) accesibles a través del Repositorio Nacional Digital de Ciencia, Tecnología e Innovación de Acceso Abierto (ALICIA).