História da Certificação Azure da Experiência EPAM

Em 2019-2020, executamos um programa de treinamento e certificação do Microsoft Azure.



Neste artigo, resolvi resumir meus resultados desse evento, que se estendeu por 12 meses.



Em 2019, ninguém esperava no que este programa se tornaria (mais de 3500 participantes de 27 países, 11 certificados diferentes).



O processo, que durou 12 meses, foi dividido em 3 etapas:

• PoC (Prova de Conceito) - verificação da abordagem
• MVP (Minimum Valuable Product) e seu piloto
• Implante o programa para toda a empresa

Existem comunicados de imprensa oficiais da EPAM e da Microsoft , mas há informações gerais suficientes.

Por que estamos fazendo isso?

• Por outro lado, qualquer engenheiro precisa constantemente dominar algo novo para acompanhar as solicitações do projeto.
• De acordo com minhas estatísticas pessoais (participo do processo de recrutamento de engenheiros para projetos em nosso departamento) - de 30 a 50% dos cargos vêm com uma indicação explícita do conhecimento de um dos grandes provedores de nuvem. Esta é uma habilidade obrigatória para nosso departamento. Não estou pronto para falar por outras empresas ou pelo menos departamentos.
• Qualquer cliente / gerente de projeto prefere contratar um especialista com experiência na tecnologia necessária, ao invés de confiar no "aprendizado rápido".
• E este programa também foi um desafio pessoal para mim ...

  EPAM townhall Google , GCP; Google. - .. Microsoft Azure.

PoC

Tudo começou em julho de 2019, quando, como treinador, conduzi o primeiro curso / experimental em az-203 para 18 pessoas em Minsk.

Se você não entrar em detalhes, as análises foram muito polêmicas. Depois de analisar os motivos, chegamos às seguintes conclusões:

• O curso deve ser feito totalmente à distância
  (COVID-19 nem estava no horizonte na época)

  . , , — 30 . . – , . , .. , 2-5 .
• O curso deve ser alongado no tempo por várias semanas ou até meses sem interromper a produção. as pessoas não podem sair de seus projetos por uma ou duas semanas. O treinamento deve ser combinado com o trabalho de projeto contínuo.
• O curso deve ser "do zero",
  independentemente do nível de entrada do participante

  ( — , ). — , — .
• Azure for Developers, , Azure Fundamentals Azure Solution Architect, .. ( , , ) . , , .

Além disso, ficou claro que não há cursos oficiais suficientes para Microsoft Certified Trainers (MCTs) para preparar as pessoas para o exame e / ou trabalho de projeto real.



Antes do início da fase MVP, fizemos outra abordagem ao projétil. Os modelos de processo de preparação foram criados. Essencialmente: uma lista de laboratórios, links para documentação oficial e Microsoft Learn. Em 2019, o Microsoft Learning era muito mais modesto do que é agora e não poderia interromper completamente a preparação para o exame.



Links para esses modelos / scripts individualizados foram enviados a um grande público para feedback. O resultado disso foi o entendimento de que é melhor não se entregar totalmente à autoaprendizagem sem supervisão (supervisão), pois não haverá visibilidade do progresso e uma pessoa em equipe aprende melhor - momentos competitivos estimulam.

Microsoft veio

Em setembro, os representantes da Microsoft nos procuraram (Microsoft Competency Center e departamento de Aprendizagem e Desenvolvimento) como parte do programa de parceria e disseram que existe uma Iniciativa de Habilidade Corporativa, graças à qual poderíamos obter até 250 vouchers para passar nos exames gratuitamente. E se de 250 vouchers emitidos, 40 certificados confirmados forem recebidos, então você pode repetir indefinidamente (embora fosse possível repetir apenas 4 vezes). Havia outras opções no programa: como pagamento por treinamento em centros de treinamento certificados (20 deles, ao que parece) e webinars da própria Microsoft no valor de 2 peças.

• Dissemos um grande obrigado pelos vouchers .
• Mas decidimos não enviar nossos funcionários para centros de treinamento em países de língua russa
  Por uma variedade de razões:

  • 20-40, . , , — . — .
  • . Microsoft Certified Trainer 4 (- “” Azure, Microsoft ). Microsoft RUS Microsoft , , .
  • , , .. , .
• Também decidimos não usar os cursos da própria Microsoft em países de língua russa pelos mesmos motivos que os locais em centros de treinamento de parceiros.

MVP / Primeiro grande lançamento

O lançamento foi feito em várias passagens, pois Tive que ver em um grande público como as pessoas reagiriam ao formato, se eu poderia “liderar” várias centenas de pessoas, como as ferramentas de streaming funcionariam, MSTeams para manter o nível de engajamento, etc. Fracasse rapidamente em uma escala de 400 pessoas, não tão ruim quanto em milhares.

• Desde setembro de 2019, iniciamos simultaneamente o curso AZ-900 na Rússia, Bielo-Rússia, Ucrânia e Cazaquistão. O AZ-900 deu certo imediatamente e ficou claro que o formato estava funcionando.
• E Az-203 apenas na Bielorrússia. Quase imediatamente, começaram a chegar colegas da Rússia e da Ucrânia, com um pedido “faça por nós também”, o que só reforçou o interesse pelo curso. No meio do curso, nós os adicionamos (colegas da Rússia e da Ucrânia), e aos 3 primeiros módulos simplesmente demos acesso à gravação. AZ-203 teve algumas críticas de conteúdo que descrevi anteriormente .
• Depois de terminar o AZ-900, fui capaz de iniciar o AZ-103 com um processo já limpo.

Não tivemos tempo de iniciar outros cursos até o final de 2019 (e não havia meta), porque precisa de tempo. Além disso, o final do ano é sempre um período quente para projetos.



Como resultado, ao final de 2019, cerca de 800 pessoas passaram por nossos programas de treinamento, centenas de uma e meia passaram .

Evento de certificação offline em Minsk

Em novembro de 2019, o evento de certificação foi realizado em Minsk.

Total: cerca de 80% dos que foram aprovados e, entre os que entraram no exame AZ-203 (desenvolvimento azul), 100% foram aprovados.



Os participantes avaliaram positivamente este evento, pediram para ser realizado, pelo menos, em Kiev e São Petersburgo, mas em fevereiro de 2020 o COVID-19 fez seus próprios ajustes

Microsoft veio pela segunda vez

No final de novembro, a Microsoft surgiu com uma proposta interessante: se você acumular 350 certificados neste programa de treinamento, podemos fazer uma campanha juntos. Ok, “desafio aceito”.

Como um belo bônus a esta oferta, conseguimos fazer testes na plataforma MeasureUp, que usamos como o controle final de conhecimento ao final do programa.

Implante o programa em toda a empresa.

Entre novembro e fevereiro estávamos nos preparando para o grande lançamento em todas as localidades e ao mesmo tempo terminando com aqueles que estavam no primeiro grande lançamento. Atualizamos o conteúdo, coordenamos os textos dos anúncios, adicionamos / reescrevemos instruções, planejamos em quais cidades faríamos entrega offline. A Data Practice se juntou a nós com cursos para Azure Data Engineer e Data Scientist.

A lista final do curso inclui: Azure para administradores, desenvolvedores, arquitetos, devops, engenheiros / cientistas de dados e fundamentos.



Fornecemos vouchers para exames de Segurança do Azure, Azure SAP, Azure IoT e Azure AI (Bots e Serviços Cognitivos) para aqueles que pudessem provar seus conhecimentos - fornecemos sem programas.



Para ter certeza da qualidade do material preparatório, do nível de dificuldade dos exames e para responder com segurança a quaisquer perguntas dos participantes, decidi preparar pessoalmente e passar em todos os exames Azure disponíveis naquele momento.



Como resultado, reunimos cerca de 2.800 pessoas, com as quais iniciamos o treinamento.

Tive que trabalhar para esse público de uma maneira completamente diferente. Começamos com os dados do primeiro lançamento,e o número de exames aprovados em uma data específica

(não tente deduzir nossa porcentagem de aprovação a partir desta programação, pois este é um instantâneo dos dados em dois certificados específicos)

E ele explodiu

Em março, a COVID chegou até nós e, com ela, toda a situação econômica e psicológica global. Durante um mês inteiro, nossa Equipe Org de Certificação Azure trabalhou no modo de sede operacional. Eu tive que reconstruir em movimento.



Os engenheiros se acomodaram em suas casas e, em vez de estudar, a cada 5 minutos atualizavam os feeds com notícias da situação epidemiológica . Vimos isso até mesmo na atividade no MSTeams.



Além disso, tive que me aprofundar ativamente em muitas características regionais e individuais, algumas das quais são descritas no artigo .



Obviamente, congelamos os planos de realização de eventos nos escritórios , demos instruções mais detalhadas para a entrega de casa. Eu forneci algumas das dicas neste artigo .



Os centros de teste fechavam-se sozinhos ou as pessoas não estavam preparadas para ir até eles, e a EPAM também proibia os funcionários de levá-los para que as pessoas não arriscassem a saúde novamente. Como resultado, 3-4 semanas foram gastas para reatribuir o exame por meio do inspetor online.



Ao mesmo tempo, surgiram perguntas do escritório na China : “Por que devemos fazer algo, está abrindo tudo aqui ?! “



No final de abril, a Microsoft afirmou que devido à conjuntura económica provocada pela COVID, o número de ciclos de emissão de conjuntos de 250 vouchers ficou limitado e o nosso limite é de apenas 1000 vouchers (embora de acordo com as regras originais, tendo em conta os certificados já entregues, poderíamos pelo menos conte mil para que, por exemplo, no outono após a liberação de az-104 / az-204 / az-303 / az-304 para renovar todos os nossos certificados) . Por isso, tive que mudar urgentemente meus planos de emissão, introduzir priorização e mudar as regras de retomada.



A situação se estabilizou apenas no final de abril.Os processos de rendição online foram mais ou menos elaborados e previsíveis, o nervosismo das pessoas foi embora, o sol apareceu.

Para incentivar ainda mais as pessoas a passar nos exames, pedimos aos que já foram aprovados que tirassem uma foto de si mesmos na frente da hashtag #CertifyAtHome com seus certificados. O senso de humor de alguns dos participantes foi uma agradável surpresa.

Características de emissão e contagem de vouchers

Fizemos a contagem de certificados em Excel no PowerQuery, para que a partir de 2 fontes de dados (um relatório do Microsoft Partner Center e uma lista de vouchers emitidos, onde marcamos manualmente os exames aprovados), calculássemos os certificados recebidos para diferentes relatórios (internos e para Microsoft), e depois nos uníssemos com dados de referência dos funcionários para entender quantos certificados temos em cada cidade / país.

• , , , .
• Microsoft, Microsoft.

No final de abril de 2020, de acordo com o método de contagem de certificados da Microsoft, cumprimos nossas obrigações para com a Microsoft, embora a maioria dos nossos engenheiros nem tivesse tido tempo de fazer o exame. A atividade de marketing começou e continuamos nosso programa de treinamento e certificação, desde os vouchers permaneceram, e não é certo parar de aprender.



É especialmente agradável que nossa taxa de sucesso em exames foi de aproximadamente 85% daqueles que receberam vouchers. A razão exata (do ponto de vista científico) é difícil de estabelecer, mas acredito que tais estatísticas tenham sido alcançadas por um extenso programa de treinamento e o controle final do conhecimento por meio de testes no MeasureUp.



Para os engenheiros, conseguimos uma oportunidade de conversar com Scott Hanselman.