kylin-user mailing list archives

Site index · List index
Message view « Date » · « Thread »
Top « Date » · « Thread »
From Iñigo Martínez <imarti...@telecoming.com>
Subject Cleanup job not deleting hive intermediate table if created from view
Date Tue, 14 May 2019 09:57:47 GMT
Just for your information, we have detected a problem that hurts
performance in the long term due to a bug in a maintenance job.

In our case, temporary intermediate tables in hive created from a hive view
are not deleted by Kylin StorageCleanupJob. We realized about it because
our backup process was stuck for hours when performing a differential copy
from HDFS to S3. This was due to more than 1M additional files where
present.

I've opened a bug at Jira.
https://jira.apache.org/jira/browse/KYLIN-4002


-- 




Iñigo Martínez
Systems Manager
imartinez@telecoming.com






  [image: Telecoming - Make it digital]
[image: 5000_empresas]
[image: 1000_empresas]

Paseo de la Castellana, 95. Torre Europa, pl 16. 28046 Madrid, Spain |
telecoming.com <http://www.telecoming.com/>



  Este correo electrónico y sus archivos adjuntos están dirigidos
únicamente a la(s) dirección(es) indicada(s) anteriormente. El carácter
confidencial, personal e intransferible del mismo está protegido
legalmente. Cualquier publicación, reproducción, distribución o
retransmisión no autorizada, ya sea completa o en parte, se encuentra
prohibida. Si ha recibido este mensaje por equivocación, notifíquelo
inmediatamente a la persona que lo ha enviado y borre el mensaje original
junto con sus ficheros anexos sin leerlo ni grabarlo en modo alguno.

Mime
View raw message