Teste de mudança

Summary

The video script emphasizes the importance of the PDCA cycle in continuous improvement and knowledge construction. It highlights the significance of structured testing based on facts and data, and the iterative nature of the improvement process. The speaker discusses strategies for prioritizing changes using impact-effort matrices and the two types of testing strategies: before-and-after comparison and simultaneous comparison. The script also advises starting small, involving everyone in tests, and using the PDCA cycle to build knowledge and improve outcomes.

Takeaways

• 🔍 Emphasis on the importance of testing in the PDCA cycle for continuous improvement and knowledge construction.
• 📈 The principle of basing decisions on facts and data, drawing from the Six Sigma methodology.
• 🔧 Utilizing the PDCA cycle (Plan-Do-Check-Act) as a structured method for implementing and testing changes.
• 💡 The concept of successive testing, highlighting that improvement is an iterative process with multiple cycles.
• 📊 Prioritizing changes based on a balance of impact and effort, using tools like the Impact vs. Effort matrix.
• 🔄 The two main strategies for change testing: before-and-after comparison and simultaneous comparison with control groups.
• 🚀 Starting small with changes to manage risk, ensuring that the impact of the change can be accurately measured.
• 🤝 Involving all team members in the testing process to disseminate knowledge and ensure collective learning.
• 🔄 Using the PDCA cycle to build structured knowledge and improve outcomes with each iteration.
• 📌 The idea of maturity levels for changes, gauging the certainty that a change will be successful based on testing and evidence.
• ⚖️ Balancing the number of tests and the degree of conviction in the success of a change, adjusting strategies accordingly.

Q & A

What is the main purpose of the PDCA cycle mentioned in the script?

The main purpose of the PDCA cycle is to structure the process of continuous improvement and knowledge construction, allowing for better process optimization and result achievement.

What are the core principles of Six Sigma that were referenced in the script?

The core principles of Six Sigma mentioned in the script are facts and data-based decision making, and structured knowledge, emphasizing the importance of evidence in driving improvements.

How does the speaker suggest one should start when implementing changes?

The speaker suggests starting with a structured method, using the PDCA cycle logic, and beginning with small-scale tests to learn and build a circular thinking approach.

What is the significance of the 'grau de convicção' or 'degree of conviction' in the change process?

The 'grau de convicção' represents the level of certainty that a change will be successful. It is often subjective and can be influenced by the number of tests conducted and the evidence gathered.

How does the speaker describe the process of successive testing in the script?

The speaker describes the process of successive testing as a continuous cycle where multiple tests are conducted until the desired performance is achieved, emphasizing that improvement is an iterative process.

What is the role of the impact-effort chart in the decision-making process for implementing changes?

The impact-effort chart helps prioritize changes based on the expected impact on the process and the effort required to implement them. It aids in deciding which changes to test and implement first.

What are the two types of testing strategies mentioned in the script?

The two types of testing strategies mentioned are the before-and-after comparison and the simultaneous comparison with control groups.

Why is the simultaneous comparison strategy considered more reliable than the before-and-after comparison?

The simultaneous comparison strategy is considered more reliable because it reduces the risk of confounding factors affecting the results, as it involves comparing two units or teams working under different conditions at the same time.

What advice does the speaker give regarding the scale of initial tests?

The speaker advises starting small, even if the conviction is high, to manage risk and learn from smaller-scale tests before expanding to larger implementations.

How does the speaker suggest involving others in the testing process?

The speaker suggests involving others in the tests to disseminate knowledge and ensure that the team learns alongside the person conducting the tests, which aids in the implementation of changes post-testing.

What is the ultimate goal of using the PDCA cycle in the context of the script?

The ultimate goal of using the PDCA cycle is to accumulate knowledge through each sequential test, thereby improving the process and outcomes over time.

Outlines

00:00

📈 Introduction to Testing and Knowledge Construction

This paragraph emphasizes the importance of testing in the construction of knowledge and process improvement. It highlights the concept of the PDCA (Plan-Do-Check-Act) cycle and its role in continuous improvement. The speaker reminds the audience of the Six Sigma principles, focusing on facts and structured knowledge. The paragraph introduces the idea of presenting well-structured knowledge and the significance of being data-driven in decision-making.

05:00

🚀 Implementing Tests and the Iterative Process

The speaker discusses the implementation of tests using the PDCA cycle as a template and the benefits of using this structured approach, especially for beginners. The paragraph explains that testing is an iterative process aimed at improvement, and the number of cycles depends on the project's timeline. It introduces the concept of the 'grau de convicção' (degree of conviction), a subjective measure of how certain one is that a change will be effective, based on the number of tests and evidence gathered.

10:01

📊 Prioritization and Strategies for Testing

This paragraph delves into the prioritization of changes using an impact-effort chart (or dispersion chart), which helps determine the expected impact of a change and the effort required to implement it. The speaker explains the importance of prioritizing changes that require little effort but have a high impact. The paragraph also discusses two testing strategies: before-and-after comparison and simultaneous comparison with control groups. It stresses the reliability of simultaneous comparison and the need to account for special causes and the regression to the mean effect.

🔄 The PDCA Cycle and Risk Management

The final paragraph focuses on the PDCA cycle as a tool for understanding the sequential learning gained from each test, which helps improve the process and results. It discusses the importance of starting small and using the degree of conviction to manage the risk of tests and potential failures. The speaker encourages involving everyone in the testing process to disseminate knowledge and learn together. The paragraph concludes by reminding the audience of the next topic, which will cover the control phase.

Keywords

💡PDCA Cycle

The PDCA Cycle, also known as the Shewhart Cycle, is a four-step iterative process used for the continuous improvement of processes and products. In the context of the video, it stands as a fundamental method for structured testing and improvement. The cycle consists of Plan, Do, Check, and Act, where one identifies a problem, tests a solution, studies the results, and then refines the process accordingly. It is emphasized as a powerful tool to build knowledge and improve processes based on facts and data.

💡Six Sigma

Six Sigma is a set of techniques and tools for process improvement that seeks to reduce the number of defects in any process. It aims to improve the quality of output through a systematic, data-driven approach. In the video, Six Sigma is referenced as a foundational principle that guides the structured pursuit of knowledge and the use of facts and data to inform decision-making and process improvement.

💡Structured Knowledge

Structured knowledge refers to information that is organized in a specific, logical manner, making it easier to understand, analyze, and use. In the context of the video, structured knowledge is crucial for effectively presenting findings and building a solid understanding of processes and their potential improvements. It is the goal of the testing and analysis conducted within the PDCA Cycle.

💡Facts and Data

Facts and data are objective pieces of information used as the basis for decision-making and problem-solving. In the video, facts and data are highlighted as the foundation of the Six Sigma methodology and the PDCA Cycle, underscoring the need for evidence-based decision-making in the pursuit of process improvement.

💡Continuous Improvement

Continuous improvement is the ongoing process of enhancing products, services, or systems based on ongoing feedback and performance metrics. It is a core concept in the video, where the PDCA Cycle is used as a tool for achieving this improvement. The idea is to consistently seek better ways of doing things, which aligns with the Six Sigma principles.

💡Grau de Convicção

Grau de Convicção, or 'degree of conviction' in English, refers to the level of certainty or belief that a proposed change will lead to the desired improvement. In the video, it is used to measure the confidence in the effectiveness of a change based on the number of tests conducted and the evidence gathered. It is a subjective measure that can increase or decrease as more tests are performed and more data is analyzed.

💡Impacto e Esforço

Impacto e Esforço, translating to 'impact and effort' in English, are terms used to assess the potential benefits and the required resources for implementing a change. Impact refers to the expected positive effect on the process, while effort considers the work, money, or specific knowledge needed to make the change happen. In the video, these terms are used to prioritize changes based on their potential benefits relative to the required effort.

💡Comparação Antes e Depois

Comparação Antes e Depois, or 'before and after comparison' in English, is a strategy used to evaluate the effectiveness of a change by comparing the results before the change was implemented with the results after the change. This method helps to determine if the change has led to improvements by analyzing the differences between the two periods.

💡Comparação Simultânea

Comparação Simultânea, or 'simultaneous comparison' in English, is a testing strategy that involves running two different versions of a process at the same time to compare their outcomes. This method allows for a more reliable assessment of the change's impact as it controls for external variables that could affect the results.

💡Estratégias de Teste

Estratégias de Teste, or 'testing strategies' in English, refer to the methods used to evaluate the effectiveness of changes or improvements. In the video, two main strategies are mentioned: before and after comparison and simultaneous comparison. These strategies help in understanding the impact of changes by comparing outcomes under different conditions.

💡Implementação

Implementação, or 'implementation' in English, is the process of putting a proposed change or solution into effect. In the context of the video, implementation follows successful testing and is based on the structured knowledge and data gathered during the PDCA Cycle. It is a critical step in the continuous improvement process, as it is when changes are applied to the actual process.

💡Risco de Teste

Risco de Teste, or 'test risk' in English, refers to the potential negative consequences or failure that may result from testing a change. In the video, it is mentioned that one should always be aware of the risks associated with testing and should plan accordingly, starting on a small scale if the risk is high or the degree of conviction in the change is low.

Highlights

The importance of testing in knowledge construction and process improvement.

The concept of Six Sigma principles and structured knowledge based on facts and data.

The PDCA (Plan-Do-Check-Act) cycle as a structured method for implementing tests.

The iterative nature of testing for continuous improvement.

The use of a structured template for beginners to implement tests based on the PDCA cycle.

The idea that testing is a successive process with multiple cycles required to achieve desired performance.

The influence of project deadlines on the number of testing cycles.

The concept of 'degree of conviction' as a subjective measure of the likelihood of a change being successful.

The use of evidence from tests to increase the conviction in the effectiveness of a change.

Prioritization techniques using impact-effort diagrams to decide which changes to implement or test first.

Different testing strategies, including before-and-after comparison and simultaneous comparison.

The reliability of simultaneous comparison in testing due to reduced influence of special causes.

The potential for the 'Hawthorne effect' where process improvement is temporary due to increased attention during testing.

The recommendation to start testing on a small scale to manage risk.

Involving everyone in tests to disseminate knowledge and facilitate future implementation.

The use of the PDCA cycle to sequentially build knowledge and improve process outcomes with each test.

The importance of understanding that each test increases knowledge and contributes to better results.

The next phase in the process, which will be control, to be discussed in the following lecture.

Transcripts

o Olá pessoal então como a gente viu na

aula anterior de exemplo né o ciclo

pbs-a e essa realização de teste ela é

Chave É na nossa construção de

conhecimento e ela é uma arma

poderosíssima dentro do seu Arsenal para

sempre melhorar os processos e trazer de

fato os resultados não é de novo vale

aqui relembrar daqueles nossos

princípios lá do seis Sigma lá no começo

e é a ideia de fatos e dados e uma um

conhecimento estruturado se você

consegue esse troço esquece e nem os

presenciais que a gente mostrou

certamente você vai estar lá em Baseado

Em Fatos e dados e você vai ter

capacidade de apresentar isso muito bem

e construir conhecimento e ter o

conhecimento estrutural dessa aula a

gente vai falar um pouco mais sobre

essas idéias e tais mudanças desde a

parte mais fundamental mas teórica até

algumas dicas aí e boas práticas para

você realizar os seus pés beleza a

primeira coisa que a gente fala então né

É sobre os pés e maneira geral há sempre

o coração do inclusos na a pra gente ver

se o nosso mudança tá mesmo ligado que a

realidade EA gente tem que sempre ver é

um método estruturado de realizar esse

espécies para isso como eu mostrei a

lógica do ciclo PDF A vale muito bem

pessoas que você que tá começando pegue

aquele formulário é o template no

círculo pbs-a três implementar seus

testes em cima daquele tempo lei e você

vai aprender muito e começar a construir

Essa maneira de pensar no círculo

pedestre Ah tudo bem Ah e outra coisa

que a gente fala né que a ideia de teste

é que vai ser sempre sucessiva

dificilmente um processo de melhoria a

gente vai fazer apenas um teste vamos

falar vários e vários ciclos até a gente

chegar no desempenho que nós gostaríamos

Lógico que a quantidade de ciclos também

depende do prazo do seu projeto Então

tem que saber dosar muito bem essa

dinâmica tudo bem mais assim como a

gente fez lá no exemplo do site vale a

pena o site da equipa Vale a Pena Ser

sequencial beleza dentro dessa dinâmica

né a gente tem basicamente esse gráfico

de coisas que podem acontecer então quê

que acontece no futebol então começa

inclusive você vai chegar lá com várias

idéias e mudança né então aqui a gente

colocou no gráfico 3 e 10 e mudança que

a gente vai amadurecer essas ideias de

mudança o nível de amadurecimento o

nível de certeza que a gente tem que a

mudança vai dar certo é o que a gente

chama de grau de convicção então grau de

convicção ela é uma medida muitas vezes

subjetiva

se aquela mudança vai ser viu não para

cumprir a melhoria é baseada

principalmente é na número de teste você

realizou o número de evidências que você

tem aquela mudança é boa é com a

singularidade da situação real com a

situação que essas evidências foram

obtidos não é

é igualzinho é a operação eo resultado

foi muito bom você tem um grau de

convicção

auto-peça municipais são a minoria das

ideias ela chegam aqui né aqui a linha

que começa em Cruz né aqui a gente

análise ela chegam lá com diferente grau

de convicção por exemplo nesse caso eu

achava que a medida Azul ia ser melhor

camisa vermelha é melhor medida laranja

a gente começa os pés Olha que a gente

começa os testes esse grau de convicção

vai mudando ele pode mudar para mais ou

mudar para menos por exemplo a medida

azul aqui na mudança Azul fez o primeiro

teste viu que meu certo fez o outro deu

muito errado fez um outro foi desastroso

fez um outro foi mais desastroso ele

para para para para para essa mudança

não vai dar certo né quem chamou de

mudança para caçar a gente acaba

abandonando tem outro comportamento que

a mudança vitoriosas né então faça um

teste deu certo passou pelo certo posso

outro meu muito certo e outro ainda mais

não pô nesses corpos teste que eu fiz e

eles foram agregando ali para aumentar o

grau de convicção Então cara aquele a

ideia do blog né o seu blog é só não sei

se é boa vamos seguir e vamos

implementar ela tornar ela perene certo

então ela vai ser implementados vai

passar para fase do kontrol é amor pode

acontecer uma outra coisa que você tem

essa mudança que fica em cima do muro né

E nem gente mostrou lá é o Facebook né

do nosso teste lado do site divulgar no

Facebook é bom ou ruim

eu não sei é bom mas não é tão bom Tem

coisa melhor para fazer não é aquele

lindo nessa infelizmente é boa mas não é

melhor que eu tenho né no que dá para a

gente fazer tá então a gente tem essa

mudança e necessita de mais perto que

necessita de mais conhecimento beleza

dado essa situação a gente tem que

priorizar né então pô é dado isso daqui

Quem que eu vou passar para a

implementação a gente pode até priorizar

a antes né qual que eu vou testar

primeiro né geralmente a gente faz isso

usando um Diagrama como esse diagrama de

impacto esforço tá quer o gráfico de

dispersão é onde para cada mudança eu

quando fico duas coisas o impacto que eu

espero que essa mudança de no processo e

o esforço necessário é para essa mudança

acontecer né por esforço quero dizer

mais trabalho mais dinheiro mais

conhecimento específico que eu preciso

ter para mudança acontecer e por Impacto

eu quero dizer o quanto que ela vai a

minha convicção de que ela vai impactar

em secadouro sem par o seu pequeno não é

possível nós temos um pouquinho mais

informações vale a pena dar uma lida de

como que você pode definir-se Impacto

esse esforço

perfeito a Seguindo aqui né a gente

sempre prioriza né E daí a gente monta

esse padrão e se vê lá olha essa mudança

um ela tem pouco esforço e tem muito

Impacto cara é o tipo de mudança que eu

quero testar eu tipo de mudança eu quero

implementar essa outra é difícil mas ela

tem bastante Impacto essa outra aqui ela

tem pouco esforço mas tem pouco em paz

essa daqui tem muito esforço e pouquinho

cartão pois esquece escala aqui certo a

gente vai olhando esses quadrantes e a

gente consegue ver aí como dança que a

gente vai seguir para implementação ou

até mesmo entrar com elas na nossa etapa

de teste aí eu também sobre testes né ah

como que a gente estrutura Isso é óbvio

que o PDS ajuda mais a gente também tem

que falar das estratégias que eu tenho

de quem gosta mesmo que você pode fazer

teste de mudança utilizando dois tipos

de estratégia a estratégia da comparação

antes e depois e essa terra da

comparação simultânea com cadeirantes

depois então eu tenho é como que você

vai organizar o teste né então na antes

e depois eu vou trabalhar em dois duas

etapas então voltei lá né aqui pode ser

lá o tempo de ciclo que eu quero e aqui

no tempo né então vamos ver como que era

em vou fazer a mudança e vou observar o

resultado depois Esse é o tipo de

comparação entre depois na comparação

simultânea eu tenho que ter duas

unidades experimentais ou duas equipes

trabalhando naquele processo é pensando

lá no nosso hambúrguer então a equipe a

vai trabalhar de um jeito e vai

trabalhador isso é a comparação

simultânea né Tá na comparação

simultânea eu voltei lá aqui o tempo no

ciclo conta os dias né ah equipe Ah tá

trabalhando do o

STB trabalhava aqui e depois ela mudou

para trabalhar aqui então Opa isso daqui

amor Então essas são as duas os dois

tipos de estratégia sempre que possível

a comparação simultânea é mais confiável

né porque é mais confiável porque é vai

ter a hora que eu comecei a testar eu

tive que trocar um dos funcionários né

daí o tempo de coisa que será que caiu

porque esse Funcionário é mais rápido

você daqui é por causa que o

procedimento que eu anotei tá dando esse

Impacto que a gente fica ali né

confundido a gente não tem a certeza do

que aconteceu eu coloquei até aqui

algumas reflexões né Então olha é antes

e depois é a base comparação histórica e

vulnerabilidade dela ocorrência de

causas especiais né ao mesmo tempo para

mudanças perfeito né que tá lá eu

demitir um funcionário outro tem alguns

será que é da minha mudança ou dessa

calça especial

ah e também pode acontecer uma coisa fez

ao torna o efeito falta nós é é o efeito

que fala aqui simplesmente por você tá

fazendo um processo de melhoria a o

indicador vai melhorar mesmo que você

não mude nada sabe eu fico aí galera

vamos lá vão melhorar Lá vem ele melhora

por um tempo mas não a melhoria perene

ela volta a ficar ruim depois que eu não

quero ela esquece Né Eu fiz novidade

então às vezes quando eu tenho

comparação antes e depois nossa eu acho

que melhorou muito é porque eu tô lá no

dia agitando né o o animador de torcida

hora que eu vou embora ele volta lá o

procedimento fica mas o animador de

torcida aqui vai embora eu processo

volta sei o que é isso pode acontecer

neste tipo de estudo e a gente cai do

cavalo você não quer uma maravilha e não

era era só ruído tá e a comparação

simultânea né gente tem duas

alternativas rodando ao mesmo tempo não

é sempre bom também não escolher uma

outra para trabalhar no jeito de outro

aleatorizar é porque ali atualizando a

gente tem mais certeza fala mais sobre o

impacto da Lei atualização e tudo mais

no curso de Green and Black Blocs

outras boas práticas que a gente tem é

sempre começar a pequeno tá então a

sempre começar a pequena e saber usar o

grau de convicção que você tem que a sua

mudança vai ser uma melhoria com o risco

do testes e fracassado né então se você

tem um grau baixo e a consequência é

grande eu tenho que testar numa escala

muito pequena mesmo que minha

consciência seja alta e o meu risco foi

grande eu tenho que testar média para

pequena escala agora sobre o risco o

pequeno né a corrupção foi baixo da

testa animais em casa e se eu tiver

muita certeza e a consequência muito

pequeno já posso fazer um ciclo

complementar então eu já tô fazendo meio

que um teste misturado com a

implementação né então sempre dose que

pode dar errado e colocando em cima

outra coisa O que é para gente falar né

envolver todos nos testes para

disseminar o conhecimento né Então você

vai ter que implementar esse depois

Então traz aqui pedir processo para

acompanhar até se é que daí eles já vão

aprender junto com você né E sempre

tentar ali mitigar os seus aí por fim

sempre lembre-se de usar o Ciclo PDCA é

ar entenda que eu conhecimento dessa

sequencial a cada teste para a gente faz

a gente aumenta nosso conhecimento no

processo e aumenta a o resultado né

melhor o resultado tudo bem Então é isso

que eu tinha para falar com vocês um

pouco sobre a mais né sobre a realização

de teste e sobre a fase nervoso a

próxima aula a gente vai começar a

última fase nossas Ele quer o que

controla até mais