Commit f49d691317ffc4334edd0265c77b04fc92e5959a
1 parent
487233bc
Exists in
master
and in
6 other branches
[Fixed #99] Reiniciar supervisord quando identificado bloqueio
Showing
2 changed files
with
90 additions
and
8 deletions
Show diff stats
rn/ProcessarPendenciasRN.php
| @@ -7,6 +7,8 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | @@ -7,6 +7,8 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | ||
| 7 | private static $instance = null; | 7 | private static $instance = null; |
| 8 | private $objGearmanWorker = null; | 8 | private $objGearmanWorker = null; |
| 9 | 9 | ||
| 10 | + const TIMEOUT_PROCESSAMENTO_JOB = 5400; | ||
| 11 | + | ||
| 10 | protected function inicializarObjInfraIBanco() | 12 | protected function inicializarObjInfraIBanco() |
| 11 | { | 13 | { |
| 12 | return BancoSEI::getInstance(); | 14 | return BancoSEI::getInstance(); |
| @@ -72,12 +74,12 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | @@ -72,12 +74,12 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | ||
| 72 | // Processamento de pendências envio dos metadados do processo | 74 | // Processamento de pendências envio dos metadados do processo |
| 73 | $this->objGearmanWorker->addFunction("enviarProcesso", function ($job) { | 75 | $this->objGearmanWorker->addFunction("enviarProcesso", function ($job) { |
| 74 | $this->gravarLogDebug("Processando envio de processo [enviarComponenteDigital] com IDT " . $job->workload(), 0, true); | 76 | $this->gravarLogDebug("Processando envio de processo [enviarComponenteDigital] com IDT " . $job->workload(), 0, true); |
| 75 | - }); | 77 | + }, null, self::TIMEOUT_PROCESSAMENTO_JOB); |
| 76 | 78 | ||
| 77 | // Processamento de pendências envio dos componentes digitais do processo | 79 | // Processamento de pendências envio dos componentes digitais do processo |
| 78 | $this->objGearmanWorker->addFunction("enviarComponenteDigital", function ($job) { | 80 | $this->objGearmanWorker->addFunction("enviarComponenteDigital", function ($job) { |
| 79 | $this->gravarLogDebug("Processando envio de componentes digitais [enviarComponenteDigital] com IDT " . $job->workload(), 0, true); | 81 | $this->gravarLogDebug("Processando envio de componentes digitais [enviarComponenteDigital] com IDT " . $job->workload(), 0, true); |
| 80 | - }); | 82 | + }, null, self::TIMEOUT_PROCESSAMENTO_JOB); |
| 81 | 83 | ||
| 82 | // Processamento de pendências de recebimento do recibo de envio do processo | 84 | // Processamento de pendências de recebimento do recibo de envio do processo |
| 83 | $this->objGearmanWorker->addFunction("receberReciboTramite", function ($job) { | 85 | $this->objGearmanWorker->addFunction("receberReciboTramite", function ($job) { |
| @@ -89,13 +91,12 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | @@ -89,13 +91,12 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | ||
| 89 | $objReceberReciboTramiteRN = new ReceberReciboTramiteRN(); | 91 | $objReceberReciboTramiteRN = new ReceberReciboTramiteRN(); |
| 90 | $objReceberReciboTramiteRN->receberReciboDeTramite($numIdentificacaoTramite); | 92 | $objReceberReciboTramiteRN->receberReciboDeTramite($numIdentificacaoTramite); |
| 91 | } | 93 | } |
| 92 | - | ||
| 93 | } | 94 | } |
| 94 | catch(Exception $e){ | 95 | catch(Exception $e){ |
| 95 | $this->gravarLogDebug(InfraException::inspecionar($e), 0, true); | 96 | $this->gravarLogDebug(InfraException::inspecionar($e), 0, true); |
| 96 | LogSEI::getInstance()->gravar(InfraException::inspecionar($e)); | 97 | LogSEI::getInstance()->gravar(InfraException::inspecionar($e)); |
| 97 | } | 98 | } |
| 98 | - }); | 99 | + }, null, self::TIMEOUT_PROCESSAMENTO_JOB); |
| 99 | 100 | ||
| 100 | //Processamento de pendências de recebimento dos metadados do processo | 101 | //Processamento de pendências de recebimento dos metadados do processo |
| 101 | $this->objGearmanWorker->addFunction("receberProcedimento", function ($job) { | 102 | $this->objGearmanWorker->addFunction("receberProcedimento", function ($job) { |
| @@ -121,7 +122,7 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | @@ -121,7 +122,7 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | ||
| 121 | $objProcessoEletronicoRN->recusarTramite($numIdentificacaoTramite, $strMensagem, ProcessoEletronicoRN::MTV_RCSR_TRAM_CD_OUTROU); | 122 | $objProcessoEletronicoRN->recusarTramite($numIdentificacaoTramite, $strMensagem, ProcessoEletronicoRN::MTV_RCSR_TRAM_CD_OUTROU); |
| 122 | } | 123 | } |
| 123 | } | 124 | } |
| 124 | - }); | 125 | + }, null, self::TIMEOUT_PROCESSAMENTO_JOB); |
| 125 | 126 | ||
| 126 | // Verifica no barramento os procedimentos que foram enviados por esta unidade e foram recusados pelas mesmas | 127 | // Verifica no barramento os procedimentos que foram enviados por esta unidade e foram recusados pelas mesmas |
| 127 | $this->objGearmanWorker->addFunction("receberTramitesRecusados", function ($job) { | 128 | $this->objGearmanWorker->addFunction("receberTramitesRecusados", function ($job) { |
| @@ -134,13 +135,13 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | @@ -134,13 +135,13 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | ||
| 134 | $this->gravarLogDebug(InfraException::inspecionar($e), 0, true); | 135 | $this->gravarLogDebug(InfraException::inspecionar($e), 0, true); |
| 135 | LogSEI::getInstance()->gravar(InfraException::inspecionar($e)); | 136 | LogSEI::getInstance()->gravar(InfraException::inspecionar($e)); |
| 136 | } | 137 | } |
| 137 | - }); | 138 | + }, null, self::TIMEOUT_PROCESSAMENTO_JOB); |
| 138 | 139 | ||
| 139 | //Processamento de pendências de recebimento dos componentes digitais do processo | 140 | //Processamento de pendências de recebimento dos componentes digitais do processo |
| 140 | $this->objGearmanWorker->addFunction("receberComponenteDigital", function ($job) { | 141 | $this->objGearmanWorker->addFunction("receberComponenteDigital", function ($job) { |
| 141 | $this->gravarLogDebug("Processando recebimento de componentes digitais [receberComponenteDigital] com IDT " . $job->workload(), 0, true); | 142 | $this->gravarLogDebug("Processando recebimento de componentes digitais [receberComponenteDigital] com IDT " . $job->workload(), 0, true); |
| 142 | ProcessarPendenciasRN::processarTarefa("enviarReciboTramiteProcesso", $job->workload()); | 143 | ProcessarPendenciasRN::processarTarefa("enviarReciboTramiteProcesso", $job->workload()); |
| 143 | - }); | 144 | + }, null, self::TIMEOUT_PROCESSAMENTO_JOB); |
| 144 | 145 | ||
| 145 | //Processamento de pendências de envio do recibo de conclusão do trãmite do processo | 146 | //Processamento de pendências de envio do recibo de conclusão do trãmite do processo |
| 146 | $this->objGearmanWorker->addFunction("enviarReciboTramiteProcesso", function ($job) { | 147 | $this->objGearmanWorker->addFunction("enviarReciboTramiteProcesso", function ($job) { |
| @@ -153,7 +154,7 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | @@ -153,7 +154,7 @@ class ProcessarPendenciasRN extends InfraAgendamentoTarefa | ||
| 153 | $this->gravarLogDebug(InfraException::inspecionar($e), 0, true); | 154 | $this->gravarLogDebug(InfraException::inspecionar($e), 0, true); |
| 154 | LogSEI::getInstance()->gravar(InfraException::inspecionar($e)); | 155 | LogSEI::getInstance()->gravar(InfraException::inspecionar($e)); |
| 155 | } | 156 | } |
| 156 | - }); | 157 | + }, null, self::TIMEOUT_PROCESSAMENTO_JOB); |
| 157 | } | 158 | } |
| 158 | 159 | ||
| 159 | private function gravarLogDebug($strMensagem, $numIdentacao=0, $bolEcho=false) | 160 | private function gravarLogDebug($strMensagem, $numIdentacao=0, $bolEcho=false) |
| @@ -0,0 +1,81 @@ | @@ -0,0 +1,81 @@ | ||
| 1 | +#!/bin/bash | ||
| 2 | + | ||
| 3 | +PATH=/usr/bin:/sbin:/bin:/usr/sbin | ||
| 4 | +export PATH | ||
| 5 | + | ||
| 6 | +echo "Iniciando execução dos script"; | ||
| 7 | +GEARMAN=$(ls /etc/init.d | grep -owih gearman.*) | ||
| 8 | +if [[ -z $GEARMAN ]]; then | ||
| 9 | + echo "ERROR: Instalação do Gearman não pode ser localizada." | ||
| 10 | + exit 1 | ||
| 11 | +else | ||
| 12 | + ps cax | grep -ih gearman.* > /dev/null | ||
| 13 | + if [ $? -ne 0 ]; then | ||
| 14 | + echo "Gearman: Iniciando serviço de gerenciamento de fila de tarefas..." | ||
| 15 | + /etc/init.d/$GEARMAN start; | ||
| 16 | + fi | ||
| 17 | +fi | ||
| 18 | + | ||
| 19 | +echo "Verificando supervisor..."; | ||
| 20 | +SUPERVISOR=$(ls /etc/init.d | grep -owih supervisor.*) | ||
| 21 | +if [[ -z $SUPERVISOR ]]; then | ||
| 22 | + echo "ERROR: Instalação do Supervisor não pode ser localizada." | ||
| 23 | + exit 1 | ||
| 24 | +else | ||
| 25 | + ps cax | grep -ih supervisor.* > /dev/null | ||
| 26 | + if [ $? -ne 0 ]; then | ||
| 27 | + echo "Supervisor: Iniciando serviço de monitoramento dos processos de integração..." | ||
| 28 | + /etc/init.d/$SUPERVISOR start; | ||
| 29 | + else | ||
| 30 | + | ||
| 31 | + COMMAND=$(ps -C php -f | grep -o "PendenciasTramiteRN.php"); | ||
| 32 | + if [ -z "$COMMAND" ]; then | ||
| 33 | + echo "Supervisor: Reiniciando serviço de monitoramento dos processos de integração..." | ||
| 34 | + /etc/init.d/$SUPERVISOR stop; | ||
| 35 | + /etc/init.d/$SUPERVISOR start; | ||
| 36 | + fi | ||
| 37 | + | ||
| 38 | + COMMAND=$(ps -C php -f | grep -o "ProcessarPendenciasRN.php"); | ||
| 39 | + if [ -z "$COMMAND" ]; then | ||
| 40 | + echo "Supervisor: Reiniciando serviço de monitoramento dos processos de integração..." | ||
| 41 | + /etc/init.d/$SUPERVISOR stop; | ||
| 42 | + /etc/init.d/$SUPERVISOR start; | ||
| 43 | + fi | ||
| 44 | + fi | ||
| 45 | +fi | ||
| 46 | + | ||
| 47 | +echo "Verificando gearman..."; | ||
| 48 | +# Garante que comando grep está disponível | ||
| 49 | +if ! [ -x "$(command -v grep)" ]; then | ||
| 50 | + echo "Error: comando grep não encontrado" >&2 | ||
| 51 | + exit 1 | ||
| 52 | +fi | ||
| 53 | + | ||
| 54 | +# Garante que comando gearadmin está disponível | ||
| 55 | +if ! [ -x "$(command -v gearadmin)" ]; then | ||
| 56 | + echo "Error: comando geardmin não encontrado" >&2 | ||
| 57 | + exit 1 | ||
| 58 | +fi | ||
| 59 | + | ||
| 60 | +#Verifica se existe alguma fila de processamento parada por causa de um worker bloqueado | ||
| 61 | +#Este caso é identificado quando o retorno do gearadmin --status encontra a seguinte situação: | ||
| 62 | +# gearadmin --status | ||
| 63 | +# receberProcedimento 5 0 1 | ||
| 64 | +# | | | | ||
| 65 | +# | | | | ||
| 66 | +# jobs na fila ------------- | | | ||
| 67 | +# jobs em processamento ------------ | | ||
| 68 | +# workers conectados ----------------------- | ||
| 69 | +# | ||
| 70 | +# Quando existe jobs disponíveis para processamento, workers conectados e nunhum trabalho em processamento; | ||
| 71 | +# isto indica que houve algum bloqueio no Worker que está impedindo-o a processar os trabalhos da fila. | ||
| 72 | +# Nesta situação, processos do german precisam ser reiniciados. | ||
| 73 | + | ||
| 74 | +GEARADMIN_STATUS=$(gearadmin --status) | ||
| 75 | +GEARADMIN_REGEX="([1-9]+|[1-9]+[0-9]*)+[[:space:]]+0+[[:space:]]+([1-9]+|[1-9]+[0-9]*)+" | ||
| 76 | + | ||
| 77 | +if echo "$GEARADMIN_STATUS" | grep -Eq "$GEARADMIN_REGEX"; then | ||
| 78 | + echo "Supervisor: Reiniciando serviço de monitoramento dos processos de integração..." | ||
| 79 | + /etc/init.d/$SUPERVISOR stop; | ||
| 80 | + /etc/init.d/$SUPERVISOR start; | ||
| 81 | +fi |