Adiciona a preparação dos dado do sucupira e carga para os dados do sucupira.

[gitnnolabs]

O que esse PR faz?

Por hora esse PR adiciona somente as tarefas para preparar os dados do Sucupira para carga no modelo SourceArticle.

IMPORTANTE: Esse PR não deve ser incorporado ainda, estou trabalhando em realizar a atividade completa. Ainda falta a tarefa de coletar esses dados e colocar no SourceArticle.

Onde a revisão poderia começar?

Por commit.

Como este poderia ser testado manualmente?

Para teste local dessa atividade é possível com o seguinte comando:

python manage.py runscript concat_sucupira --script-args br-capes-colsucup-producao-2017a2020-2022-06-22-bibliografica-artpe.csv br-colsucup-prod-detalhe-bibliografica-2017a2020-2022-06-30-artpe.csv br-capes-colsucup-prod-autor-2017a2020-2022-05-31-bibliografica-artpe-2017.csv,br-capes-colsucup-prod-autor-2017a2020-2022-05-31-bibliografica-artpe-2018.csv,br-capes-colsucup-prod-autor-2017a2020-2022-05-31-bibliografica-artpe-2019.csv,br-capes-colsucup-prod-autor-2017a2020-2022-05-31-bibliografica-artpe-2020.csv 1

O último parâmetro indica se a execução deve ser síncrona ou assíncrona.

Algum cenário de contexto que queira dar?

Essa atividade se faz necessária para termos os dados de autoria e de detalhes da produção cientifica do sucupira, mais detalhes é possível olhando no link: https://dadosabertos.capes.gov.br/dataset/

Screenshots

Arquivo resultando desse processamento:

Quais são tickets relevantes?

#199

Referências

Indique as referências utilizadas para a elaboração do pull request.

[gitnnolabs]

@robertatakenaka vou aprovar para dá seguimento da coleta em ambiente de desenvolvimento do OCABr.