Altera job crons p/ serem configuráveis e com valores default alterados

[patymori]

O que esse PR faz?

Este PR altera os job crons para permitir que, através da configuração de variáveis de ambiente/docker, seja possível alterar quando as tarefas de sincronização de identificadores e de ETL rodarão. Os valores padrão também foram alterados, conforme configuração corrente para os crons do ISIS2Mongo e loadlanguages da coleção BR. Segue abaixo algumas observações sobre cada um dos crons:

• RETRIEVE_IDENTIFIERS_CRON_STRING = Recomendado que seja após o término do ISIS2Mongo
• PRODUCER_BLOGS_CRON_STRING = Recomendado que seja após o CONSUMER_BLOGS_CRON_STRING
• PRODUCER_EXTRACT_CRON_STRING = Recomendado que seja após o término do loadlanguages
• PRODUCER_TRANSFORM_CRON_STRING = Recomendado que seja após o término das extrações
• PRODUCER_LOAD_CRON_STRING = Recomendado que seja após o término das transformações
• CONSUMER_EXTRACT_CRON_STRING = Recomendado que seja após o PRODUCER_EXTRACT_CRON_STRING
• CONSUMER_TRANSFORM_CRON_STRING = Recomendado que seja após o PRODUCER_TRANSFORM_CRON_STRING
• CONSUMER_LOAD_CRON_STRING = Recomendado que seja após o PRODUCER_LOAD_CRON_STRING
• CONSUMER_BLOGS_CRON_STRING = Não há um horário específico, pois consulta diretamente o blog

Onde a revisão poderia começar?

Em opac_proc/web/config.py

Como este poderia ser testado manualmente?

• Inicie o rq-scheduler e verifique os crons configurados através da interface WEB
• Verifique o log do rq-scheduler e nenhum erro deve ocorrer durante o processo de limpeza e configuração dos scheduler
• Altere o valor das seguintes variáveis:
  • OPAC_RETRIEVE_IDENTIFIERS_CRON_STRING
  • OPAC_PRODUCER_BLOGS_CRON_STRING
  • OPAC_PRODUCER_EXTRACT_CRON_STRING
  • OPAC_PRODUCER_TRANSFORM_CRON_STRING
  • OPAC_PRODUCER_LOAD_CRON_STRING
  • OPAC_CONSUMER_EXTRACT_CRON_STRING
  • OPAC_CONSUMER_TRANSFORM_CRON_STRING
  • OPAC_CONSUMER_LOAD_CRON_STRING
  • OPAC_CONSUMER_BLOGS_CRON_STRING

Algum cenário de contexto que queira dar?

Os crons que estão atualmente no código não atendem mais as configurações de processamento da coleção BR e, por isso, foi necessário alterar.

Screenshots

N/A

Quais são tickets relevantes?

#501

Referências

Nenhuma.

[robertatakenaka]

Sugiro acrescentar uma documentação para explicitar a linha do tempo, justificar o dia/hora de cada ocorrência, nem que seja um comentário no código.

[patymori]

Sugiro acrescentar uma documentação para explicitar a linha do tempo, justificar o dia/hora de cada ocorrência, nem que seja um comentário no código.

@robertatakenaka, pode verificar? Criado ticket #503 para a documentação mais completa.

[joffilyfe]

Não consegui executar o proc na minha máquina mas rodei o ambiente, instanciei as classes de consumo e produção e os crons estavam setados de acordo com o pretendido 👍

@roberta, poderia revisá-lo novamente?