Ticket #9178 (closed task: fixed)

Opened 11 months ago

Last modified 10 months ago

append data to DNF table in production

Reported by: carnero@… Owned by: carlosadean
Priority: normal Milestone: no milestone
Component: Operation/DataManagement Severity: normal
Keywords: Cc:
Estimated Number of Hours: 0.0 Add Hours to Ticket: 0
Deviation?: no Total Hours: 1.21

Description

como foi combinado ontem, para nao atrapalhar os objetivos científicos enquanto arrumamos os problemas de escabilidade em DNF, peço para fazer um append numa tabela de DNF no banco de dados de produção, com aqueles objetos que não entraram na tabela e que faltam para ter a tabela completa.

O catálogo a adicionar é: /home/carnero/missing_dnf_run_gold_1_0_0.fits

Estes valores devem ser adicionados á tabela: photoz_compute.dnf_2212

Lembrando para recriar depois os indeces necesarios para q3c e em coadd_objects_id

Acho que esta tarefa é para o Carlos, ele falou que não deve demorar muito, 1.30h, falou ontem...

Change History

comment:1 Changed 11 months ago by guilherme.soares

  • Owner changed from guilherme.soares to riccardo.campisano
  • Status changed from new to assigned

comment:2 Changed 11 months ago by carlosadean

  • Add Hours to Ticket changed from 0.0 to 1.21
  • Total Hours changed from 0.0 to 1.21

Oi Aurelio,

Já fiz inúmeras tentativas e não consigo se quer gerar o booster para a ingestão deste arquivo. Recebo continuamente o erro abaixo

*** Error: Oops.  Unhandled exception UnicodeDecodeError.

Exception payload: 'ascii' codec can't decode byte 0xc3 in position
11: ordinal not in range(128)

Acredito que seja algo no header do arquivo, tem como dar uma limpada?

Header listing for HDU #1:
SIMPLE  =                    T / Standard FITS format
BITPIX  =                    8 / Character data
NAXIS   =                    1 / Text string
NAXIS1  =                  656 / Number of characters
VOTMETA =                    T / Table metadata in VOTable format
EXTEND  =                    T / There are standard extensions
COMMENT
COMMENT The data in this primary HDU consists of bytes which
COMMENT comprise a VOTABLE document.
COMMENT The VOTable describes the metadata of the table contained
COMMENT in the following BINTABLE extension.
COMMENT Such a BINTABLE extension can be used on its own as a perfectly
COMMENT good table, but the information from this HDU may provide some
COMMENT useful additional metadata.
COMMENT There is one following BINTABLE.
NTABLE  =                    1 / Number of following BINTABLE HDUs
END

Header listing for HDU #2:
XTENSION= 'BINTABLE'           / binary table extension
BITPIX  =                    8 / 8-bit bytes
NAXIS   =                    2 / 2-dimensional table
NAXIS1  =                  106 / width of table in bytes
NAXIS2  =               332959 / number of rows in table
PCOUNT  =                    0 / size of special data area
GCOUNT  =                    1 / one data group
TFIELDS =                    8 / number of columns
EXTNAME = 'OBJECTS '           / table name
TTYPE1  = 'Z_BEST  '           / label for column 1
TFORM1  = 'D       '           / format for column 1
TTYPE2  = 'nneighbors'         / label for column 2
TFORM2  = 'D       '           / format for column 2
TTYPE3  = 'coadd_objects_id'   / label for column 3
TFORM3  = 'K       '           / format for column 3
TTYPE4  = 'tilename'           / label for column 4
TFORM4  = '50A     '           / format for column 4
TTYPE5  = 'ERR_Z   '           / label for column 5
TFORM5  = 'D       '           / format for column 5
TTYPE6  = 'RA      '           / label for column 6
TFORM6  = 'D       '           / format for column 6
TTYPE7  = 'DEC     '           / label for column 7
TFORM7  = 'D       '           / format for column 7
TTYPE8  = 'z1      '           / label for column 8
TFORM8  = 'D       '           / format for column 8
DATE-HDU= '2017-08-02T15:32:12' / Date of HDU creation (UTC)
STILVERS= '3.0-7   '           / Version of STIL software
STILCLAS= 'uk.ac.starlink.votable.FitsPlusTableWriter' / Author class in STIL so
END

Alguma sugestão?

comment:3 Changed 11 months ago by carlosadean

  • Deviation? unset

comment:4 Changed 11 months ago by carlosadean

  • Component changed from other to operation/dataingestion

comment:5 Changed 11 months ago by carnero@…

estranho... nao consigo ver esse header que voce ve!
qual é o archivo que você está olhando?


From: "LIneA Ticket System" <ticket@…>
Sent: Wednesday, August 30, 2017 2:26:26 PM
Subject: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production


Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |


Changes (by carlosadean):

  • component: other => operation/dataingestion

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:4>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

comment:6 Changed 11 months ago by carlosadean@…

listhead /home/carnero/missing_dnf_run_gold_1_0_0.fits &> /tmp/missing.txt

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean


De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 14:35:15
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production


Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |


Comment (by carnero@…):

estranho... nao consigo ver esse header que voce ve!
qual é o archivo que você está olhando?

----- Original Message -----
From: "LIneA Ticket System" <ticket@…>
Sent: Wednesday, August 30, 2017 2:26:26 PM
Subject: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production
-------------------------------------+-------------------------------------

Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |

-------------------------------------+-------------------------------------
Changes (by carlosadean):

  • component: other => operation/dataingestion

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:4>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:5>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

comment:7 Changed 11 months ago by carnero@…

pode tentar de novo com este outro? /home/carnero/missing_dnf_run_gold_1_0_0_v2.fits

Olha que mudou o nome, tirei os comments e se for isso que estava atrapalhando, então não deve atrapalhar mais


From: "LIneA Ticket System" <ticket@…>
Sent: Wednesday, August 30, 2017 2:37:34 PM
Subject: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production


Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |


Comment (by carlosadean@…):

listhead /home/carnero/missing_dnf_run_gold_1_0_0.fits &> /tmp/missing.txt

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean

----- Mensagem original -----
De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 14:35:15
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production
-------------------------------------+-------------------------------------

Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |

-------------------------------------+-------------------------------------

Comment (by carnero@…):

estranho... nao consigo ver esse header que voce ve!
qual é o archivo que você está olhando?

----- Original Message -----
From: "LIneA Ticket System" <ticket@…>
Sent: Wednesday, August 30, 2017 2:26:26 PM
Subject: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production

-------------------------------------+-------------------------------------

Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no

milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |

-------------------------------------+-------------------------------------

Changes (by carlosadean):

  • component: other => operation/dataingestion

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:4>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:5>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:6>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

comment:8 Changed 11 months ago by carlosadean

Continua na mesma, o gavo não está conseguindo entender alguma parte do arquivo .fits e não faço a menor ideia de qual seja, já que no gavo a saída não é acompanhada pelos erros comuns de scripts python.

Exception payload: 'ascii' codec can't decode byte 0xc3 in position
11: ordinal not in range(128)

comment:9 Changed 11 months ago by carnero@…

ok, conseguimos resolver, o problema não era com os headers, mas com os dados mesmo.
Sem entender por qué, eu fiz o seguintes:
1) Abri o archivo utilizando o TOPCAT
2) TOPCAT permite mudar o formato das columnas, ai, mudei todas aquelas definidas como double a float, também, me assegurei de mudar também uma columna de ASCII (tilename), de novo a ASCII...

Isso foi tudo que eu fiz. E Carlos me confirmou que agora funciona certinho!


From: "LIneA Ticket System" <ticket@…>
Sent: Wednesday, August 30, 2017 3:04:47 PM
Subject: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production


Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |


Comment (by carlosadean):

Continua na mesma, o gavo não está conseguindo entender alguma parte do
arquivo .fits e não faço a menor ideia de qual seja, já que no gavo a
saída não é acompanhada pelos erros comuns de scripts python.

Exception payload: 'ascii' codec can't decode byte 0xc3 in position
11: ordinal not in range(128)

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:8>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

comment:10 Changed 11 months ago by riccardo.campisano

Se quer confirmar a causa, recoloque o dado original, que da erro, e faça apenas a mudança ascii em tilename, assim terá a resposta.

comment:11 Changed 11 months ago by carlosadean@…

Eu havia comparado os tipos das colunas com outros arquivos e notei que para tilename todos usavam o tipo 12A, porém, este usava 50A.

Olhando agora para este novo arquivo vejo que 12A está lá, e agora funciona. Só não sei dizer o que significa exatamente este valor (talvez tamanho), mas certamente era a causa do erro.

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean


De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 15:36:20
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production


Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |


Comment (by riccardo.campisano):

Se quer confirmar a causa, recoloque o dado original, que da erro, e faça
apenas a mudança ascii em tilename, assim terá a resposta.

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:10>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

comment:12 Changed 11 months ago by carlosadean@…

Aurelio,

Conforme Campisano sugere, poderia voltar com os tipos e alterar somente o tilename?

Outra coisa, fui feliz até rodar o 'gavo import update', parece que o conteúdo do arquivo está com problema de encoding, se possível padronize a coluna tilename para utf8, conforme a mensagem abaixo:

Making data import_table
cc -Wall -DINPUT_LINE_MAX=4000 -DQUERY_N_PARS=8 -DAUTO_NULL='nan' -g -I /usr/include/cfitsio -o booster boosterskel.c func.c -lcfitsio -lm
boosterskel.c: In function 'parseBigint':
boosterskel.c:262: warning: format '%Ld' expects type 'long long int *', but argument 3 has type 'int64_t *'
00332959 records done.
*X*X* Uncaught exception at toplevel
*** Error: Oops.  Unhandled exception DataError.

Exception payload: invalid byte sequence for encoding "UTF8": 0xb4
CONTEXT:  COPY dnf_2212, line 1, column tilename

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean


De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 15:50:46
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production


Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |


Comment (by carlosadean@…):

Eu havia comparado os tipos das colunas com outros arquivos e notei que
para tilename todos usavam o tipo 12A, porém, este usava 50A.

Olhando agora para este novo arquivo vejo que 12A está lá, e agora
funciona. Só não sei dizer o que significa exatamente este valor (talvez
tamanho), mas certamente era a causa do erro.

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean

----- Mensagem original -----
De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 15:36:20
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production
-------------------------------------+-------------------------------------

Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |

-------------------------------------+-------------------------------------

Comment (by riccardo.campisano):

Se quer confirmar a causa, recoloque o dado original, que da erro, e faça
apenas a mudança ascii em tilename, assim terá a resposta.

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:10>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:11>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

comment:13 Changed 11 months ago by carnero@…

ok... mas não sei como padronizar ao "UTF8", na verdade... = (

Ja fiz o que pediram... coloquei o tilename como string (ainda que no archivo já está definido como string) e deixei o resto como estava, em vez de float, double.

pode tentar de novo com missing_dnf_run_gold_1_0_0_v2.fits


From: "LIneA Ticket System" <ticket@…>
Sent: Wednesday, August 30, 2017 4:00:08 PM
Subject: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production


Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |


Comment (by carlosadean@…):

Aurelio,

Conforme Campisano sugere, poderia voltar com os tipos e alterar somente o
tilename?

Outra coisa, fui feliz até rodar o 'gavo import update', parece que o
conteúdo do arquivo está com problema de encoding, se possível padronize a
coluna tilename para utf8, conforme a mensagem abaixo:

Making data import_table
cc -Wall -DINPUT_LINE_MAX=4000 -DQUERY_N_PARS=8 -DAUTO_NULL='nan' -g -I
/usr/include/cfitsio -o booster boosterskel.c func.c -lcfitsio -lm
boosterskel.c: In function 'parseBigint':
boosterskel.c:262: warning: format '%Ld' expects type 'long long int *',
but argument 3 has type 'int64_t *'
00332959 records done.
*X*X* Uncaught exception at toplevel
*** Error: Oops.  Unhandled exception DataError.

Exception payload: invalid byte sequence for encoding "UTF8": 0xb4
CONTEXT:  COPY dnf_2212, line 1, column tilename

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean

----- Mensagem original -----
De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 15:50:46
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production
-------------------------------------+-------------------------------------

Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |

-------------------------------------+-------------------------------------

Comment (by carlosadean@…):

Eu havia comparado os tipos das colunas com outros arquivos e notei que
para tilename todos usavam o tipo 12A, porém, este usava 50A.

Olhando agora para este novo arquivo vejo que 12A está lá, e agora
funciona. Só não sei dizer o que significa exatamente este valor (talvez
tamanho), mas certamente era a causa do erro.

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean

----- Mensagem original -----
De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 15:36:20
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production

-------------------------------------+-------------------------------------

Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no

milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |

-------------------------------------+-------------------------------------

Comment (by riccardo.campisano):

Se quer confirmar a causa, recoloque o dado original, que da erro, e

faça

apenas a mudança ascii em tilename, assim terá a resposta.

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:10>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:11>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:12>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

comment:14 Changed 11 months ago by carlosadean@…

Oi Aurelio,

Está rodando com .csv, o update pareceu rápido, mas o terminal ficou preso como se algo ainda estivesse rodando.

Levando em consideração que a tabela é gingantesca (~400 milhoes de linhas) então é provável que tenha que executar algo por baixo dos panos. Só nos resta aguardar.

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean


De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 16:08:20
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production


Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |


Comment (by carnero@…):

ok... mas não sei como padronizar ao "UTF8", na verdade... = (

Ja fiz o que pediram... coloquei o tilename como string (ainda que no
archivo já está definido como string) e deixei o resto como estava, em vez
de float, double.

pode tentar de novo com missing_dnf_run_gold_1_0_0_v2.fits

----- Original Message -----
From: "LIneA Ticket System" <ticket@…>
Sent: Wednesday, August 30, 2017 4:00:08 PM
Subject: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production
-------------------------------------+-------------------------------------

Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |

-------------------------------------+-------------------------------------

Comment (by carlosadean@…):

Aurelio,

Conforme Campisano sugere, poderia voltar com os tipos e alterar somente

o

tilename?

Outra coisa, fui feliz até rodar o 'gavo import update', parece que o
conteúdo do arquivo está com problema de encoding, se possível padronize

a

coluna tilename para utf8, conforme a mensagem abaixo:

Making data import_table
cc -Wall -DINPUT_LINE_MAX=4000 -DQUERY_N_PARS=8 -DAUTO_NULL='nan' -g -I
/usr/include/cfitsio -o booster boosterskel.c func.c -lcfitsio -lm
boosterskel.c: In function 'parseBigint':
boosterskel.c:262: warning: format '%Ld' expects type 'long long int *',
but argument 3 has type 'int64_t *'
00332959 records done.
*X*X* Uncaught exception at toplevel
*** Error: Oops.  Unhandled exception DataError.

Exception payload: invalid byte sequence for encoding "UTF8": 0xb4
CONTEXT:  COPY dnf_2212, line 1, column tilename

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean

----- Mensagem original -----
De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 15:50:46
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production

-------------------------------------+-------------------------------------

Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no

milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |

-------------------------------------+-------------------------------------

Comment (by carlosadean@…):

Eu havia comparado os tipos das colunas com outros arquivos e notei que
para tilename todos usavam o tipo 12A, porém, este usava 50A.

Olhando agora para este novo arquivo vejo que 12A está lá, e agora
funciona. Só não sei dizer o que significa exatamente este valor (talvez
tamanho), mas certamente era a causa do erro.

--
Carlos Adean
IT Team
linea.gov.br
skype: carlosadean

----- Mensagem original -----
De: "LIneA Ticket System" <ticket@…>
Enviadas: Quarta-feira, 30 de agosto de 2017 15:36:20
Assunto: Re: [linea] #9178: append data to DNF table in production

#9178: append data to DNF table in production

-------------------------------------+-------------------------------------

Reporter: | Owner:

carnero@… | riccardo.campisano

Type: task | Status: assigned

Priority: normal | Milestone: no

milestone

Component: | Severity: normal

operation/dataingestion | Keywords:

Resolution: | Add Hours to Ticket: 0

Estimated Number of Hours: 0.0 | Total Hours: 1.21

Deviation?: 0 |

-------------------------------------+-------------------------------------

Comment (by riccardo.campisano):

Se quer confirmar a causa, recoloque o dado original, que da erro, e

faça

apenas a mudança ascii em tilename, assim terá a resposta.

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:10>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:11>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:12>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

--
Ticket URL: <http://ticket.linea.gov.br/ticket/9178#comment:13>
linea <http://ticket.linea.gov.br>
Sistema de Ticket do LIneA

comment:15 Changed 10 months ago by riccardo.campisano

  • Owner changed from riccardo.campisano to carlosadean

Aurelio / Carlos, esse ticket está concluido?

comment:16 Changed 10 months ago by carnero

  • Status changed from assigned to closed
  • Resolution set to fixed

sim, foi resolvido

Note: See TracTickets for help on using tickets.