Software Público Brasileiro

@diguliu ainda vamos fazer algo a respeito disso?

A princípio to mapeamento para a próxima release!

Milestone removed

Milestone changed to Prioridades - Encerramento

@diguliu depois anota aqui sua definição com a @marisa sobre migração. Se será atacado ou não

Após reunião com @marisa, ficamos de finalizar as issues #450, #452 e #453. Nas duas últimas issues, caso necessário, removeremos as comunidades e refaremos a migração.

Essa issue é sobre o que especificamente @diguliu ? Não lembro.

@marisa, se eu não me engano, tínhamos o plano de tentar migrar as páginas wiki do portal antigo caso tivéssemos tempo. Deixamos ela de fora da migração porque estava fora do escopo planejado.

Ahh ok. Obrigada Rodrigo.

Ahh Rodrigo, acho que essa foram as notícias da capa do portal que não foram migradas. Se olharmos nas notícias só temos as geradas no novo portal (https://softwarepublico.gov.br/social/spb/noticias) porém tem uma pasta que chamada https://softwarepublico.gov.br/social/spb/blog que contém uma série de notícias que eu não sei de onde vieram, você saberia dizer? Essas são as principais notícias do SPB que ficaram para trás. Agora mesmo eu estava procurando uma notícia antiga e não encontrei na busca do noosfero e nem na busca global. Isso é algo bem importante.Teremos como concluir isso? @obsneto @lmatos para conhecimento.

Oi @marisa, se for para mover as notícias do https://softwarepublico.gov.br/social/spb/blog para https://softwarepublico.gov.br/social/spb/noticias, dá para fazermos. Mas se for para implementar a migração do conteúdo wiki do portal antigo, não dará tempo. Você pode confirmar qual dos dois seria?

Oi @diguliu Seria a segunda opção mas não seria migração da wiki, propriamente dita mas temos umas 450 notícias que estão postadas na capa do portal antigo que não foram migradas, acho que elasestão nesse formato.

Tenho uma sugestão: Se te passarmos todos os dados numa planilha fica mais fácil para importar? @lmatos para conhecimento.

@paulormm conforme combinamos na reunião de ontem estamos preparando um csv com os seguintes campos: data, título e conteúdo da notícia. Até sexta disponibilizaremos por aqui. Obrigada.

Segue em anexo o csv com 427 notícia a serem migradas na comunidade spb https://softwarepublico.gov.br/social/spb/ no blog chamado Notícias. Aí constam os seguintes campos: data, título e conteúdo da notícia. Se precisarem de apoio ou do script é só falar.

Conversarei com o @diguliu e a equipe do Noosfero para vermos isso.

Ok @paulormm . Estamos no aguardo. Ahhh peço que, se puderem, disponibilizem em algum lugar scripts que estão sendo utilizados na migração para que possamos ver uma forma de internamente fazermos isso, caso não dẽ tempo ou caso esqueçamos algo após o termo de cooperação com vocês. Obrigada.

Tudo o que fazemos sempre está em algum repositório em https://softwarepublico.gov.br/gitlab/softwarepublico/.

• https://softwarepublico.gov.br/gitlab/softwarepublico/migration-source-db

O que mais, @diguliu ?

Olá @marisa, desculpe a demora na resposta.

Com a planilha facilita, mas o maior problema é a limitação de tempo mesmo. Terminei hoje de implementar a correção relativa à issue #450 e ainda falta a #452 e #453 que sei que irá estourar pra além de abril. Minha bolsa termina agora nesse mês, mas assumi o compromisso de terminar essas correções e irei entregá-las. Porém não posso me comprometer com essa outra demanda. Fazer essa importação de conteúdo exige além do script de conversão, teste e revisão do resultado, o que consome uma quantidade razoável de tempo. Verei a possibilidade de algum outro bolsista do projeto que irá continuar até maio fazer essa importação, até porque com a planilha, não é necessário ter conhecimento do esquema de migração.

Em relação aos scripts para migração, toda a informação do que foi utilizado e de como utilizar está nesse repositório ou referenciado nele: https://softwarepublico.gov.br/gitlab/softwarepublico/migration

Isso mesmo @diguliu : veremos contigo para dar o caminho das pedras e tentarmos que algum outro bolsista faça essa tarefa. Na próxima semana, vemos isso com a equipe, mas será algo extra mesmo, além do que está previsto para 06 de maio, fim da última sprint.

Milestone changed to Extras

ok @diguliu obrigada pelo feedback.

@marcosronaldo ver com @diguliu para parear com @gabrielssilva

Reassigned to @marcosronaldo

As notícias importadas do portal antigo contém links com domínio softwarepublico.gov.br e path do domínio antigo (que agora está em antigo.softwarepublico.gov.br). Consequentemente esses links estão quebrados. Uma solução boa seria fazer o download e importação automática de todos os arquivos linkados do portal antigo para o portal novo, e em seguida corrigir os links no corpo de cada notícia. Isso é inviável devido ao tempo curto para implementação dessa solução, então solução escolhida foi a correção do domínio dos links para o portal antigo. Isso quer dizer que as imagens e arquivos linkados nessas notícias ainda estão hospedados no antigo portal. Embora esteja tudo acessível atualmente, caso o portal antigo saia do ar, todos esses links irão falhar. @marisa @paulormm @diguliu

@marcosronaldo : pode seguir dessa forma. A depender da quantidade de ajustes depois da nossa entrega, avaliamos em melhor isso. De qualquer forma, os conteúdos estão sendo migrados e as imagens mapeadas para uma troca manual pelos estagiários da DeGSI, se for o caso.

@marisa e @lmatos : em voz discutimos isso, para um melhor entendimento com vocês.

Oi Pessoal, Já estávamos ciente deste problema desde a primeira migração...Já tínhamos decidido que não migraríamos imagens e nem colocaremos elas manualmente hehehe vejam como o @diguliu fez isso nas outras migrações de notícias: https://softwarepublico.gov.br/social/e-cidade/blog/nova-versao-disponivel-2.3.19.. dessa forma atende. Obrigada.

Perfeito, @marisa .

@marcosronaldo : como definido com @diguliu , já faz a migração sem importar as imagens mesmo.

Task de migração feita e testada localmente. Na próxima atualização será executada para homologação. @kanashiro para conhecimento

Status changed to closed

Oi Marcos, Além de desejarmos que as migrações fossem feitas no spb/noticias e não spb/blog algumas datas estão com a data incorreta. Vou postar aqui alguns casos para vermos se foi problema no csv ou na migração.

Status changed to reopened

@marisa, estou fazendo a alteração para importar no blog correto, entretanto as notícias não serão importadas em produção nessa atualização de hoje, faremos isso após sua confirmação de que está tudo OK. Sobre as datas, todas as notícias são importadas da mesma forma automaticamente, então se apenas algumas estão com data incorreta, os erros podem estar no arquivo csv.

Oi @marcosronaldo acabei de achar um caso aqui: https://dev.softwarepublico.gov.br/social/spb/blog/a-solucao-invesalius-sera-disponibilizada-no-inicio-de-novembro.No arquivo consta a data 16/01/2009 às 16:19 e ela foi migrada em 01/01/2007 14:31. Temos alguns casos assim.

@marisa Após um tempo investigando o problema, conclui que a importação está funcionando como esperado, importando todas as datas de forma correta. Esses exemplos de datas incorretas são de artigos que já existiam, e portanto não são importados novamente, para não duplicar/alterar informações já existentes, que podem ter sido alteradas de forma manual. Como pode ser observado em produção, esse artigo que foi usado como exemplo já existia com a data "incorreta" (2007). Em suma, a única alteração necessária em relação a essa issue é importar para o blog "noticias" em vez de "blog".

Realmente você está certo. Vamos proceder conforme sua orientação. Obrigada @marcosronaldo

@marisa rodamos a importação em dev, já pode conferir =)

Oi @marcosronaldo em dev mesmo? continua do mesmo jeito, não está em spb/noticias e sim spb/blog

@marisa as notícias que já existiam não foram alteradas de forma alguma, isso quer dizer que se algumas delas estavam dentro de "blog", elas continuaram lá. As notícias que não existiam no portal foram importadas para notícias. Quando importadas em produção, todas elas poderão ser encontradas na busca normalmente.

Oi @marcosronaldo o estranho é que o nosso blog atual de produção não consta nada, está vazio, nesse caso deve continuar dessa forma, todas nossas notícias devem ir para spb/noticias. Não entendemos porque o dev não está refletindo isso. Se puder me passa um telefone que te ligo e conversamos.

@marisa algumas notícias antigas estavam em "notícias" mas com o path errado, e portanto eram acessadas apenas em spb/blog. Alteramos a importação para também corrigir o path das notícias que já existiam. Assim que rodar em dev te aviso para homologar mais uma vez =)

Beleza. Vou dar uma olhada porque não estou entendendo heheh temos dois blogs na comunidade spb: um chamado notícias que fica indexado na capa do portal e outro chamado blog que não usamos para nada. Tem que dar uma olhada direitinho porque pretendemos continuar com o blog "notíticas" mesmo pq o bloco de noticias da capa do portal e indexado por ele.

Tinham notícias que na url ficavam com "/spb/blog/". Corrigimos esse problema, colocando na url "/spb/noticias/". Vão ficar todas as notícias no blog "Notícias", e podemos assim apagar o blog padrão de nome "Blog", já que não é utilizado. Ficou mais claro?

entendi. Obrigada

@marisa pode dar uma olhada em dev mais uma vez?

Eu dei uma olhada aqui, existem 45 páginas de notícias (x 13 da produção), o que me pareceu certo.

Esperar pela validação da @marisa

Quado clicamos na notícia dá erro:

Esta página não existe: /social/spb/noticias/encontro-tecnico-do-software-publico-brasileiro-debate-desenvolvimento-seguro-de-software-nesta-sexta

Você pode ter clicado em um link expirado ou em um endereço digitado errado. Se você clicou em um link que estava em outro site ou que foi passado a você por outra pessoa, seria legal que você avisasse que este link não é mais válido.

@ioneoliveira para acompanhamento

Ahh acho que é pq ele direcionou paraprodução. coloquei dev na frente e foi. amanhã faço uma validação melhor . Obrigada

O ambiente dev estava com domínio de produção, então todo os links do ambiente estavam com domínio errado. Já foi corrigido.

abrindo normalmente: https://dev.softwarepublico.gov.br/social/spb/noticias/encontro-tecnico-do-software-publico-brasileiro-debate-desenvolvimento-seguro-de-software-nesta-sexta

Status changed to closed

homologada em dev.

ainda não está em produção

Já está em produção :)

homologado.