<div dir="ltr">Clecio, e' claro que servem ;)<div><br></div><div>Aqueles dados sao uma "mina de ouro". Mas tem que ser trabalhados, leva tempo pra conseguir criar essa base de dados. Eu trabalhei na tese somente com dados do periodo de 1989 ate 2004. Ainda tenho que atualizar com as pesquisas mais recentes. Outro problema e' que  os dados do CESOP sao de apenas alguns poucos institutos, correto?  Mas como a  proxima eleicao e' apenas daqui a 2 anos, com certeza terei tempo pra formar um ranking ate la.  </div><div><br></div><div>Minha intencao, a medio prazo,  e' disponibilizar um acervo com os resultados de todas as pesquisas que eu tenho acesso, assim quem trabalha nessa area pode fazer suas proprias analises, sem ter que utilizar os microdados. </div><div><br></div><div>Abraco </div></div><div class="gmail_extra"><br><div class="gmail_quote">Em 23 de outubro de 2014 16:58, Clécio da Silva Ferreira <span dir="ltr"><<a href="mailto:clecio.ferreira@yahoo.com.br" target="_blank">clecio.ferreira@yahoo.com.br</a>></span> escreveu:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div style="color:#000;background-color:#fff;font-family:HelveticaNeue-Light,Helvetica Neue Light,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:16px"><div><span>Ia comentar sobre isso, Neale. Os dados que o CESOP tem, e disponibilizou alguns desses para sua tese, não servem para avaliar o histórico dos institutos?</span></div><div style="color:rgb(0,0,0);font-size:16px;font-family:HelveticaNeue-Light,Helvetica Neue Light,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;background-color:transparent;font-style:normal"><span><br></span></div><div style="color:rgb(0,0,0);font-size:16px;font-family:HelveticaNeue-Light,Helvetica Neue Light,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;background-color:transparent;font-style:normal"><span>Atte,</span></div><div style="color:rgb(0,0,0);font-size:16px;font-family:HelveticaNeue-Light,Helvetica Neue Light,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;background-color:transparent;font-style:normal"><span>Clécio<br></span></div> <div><br><br></div><div style="display:block"> <div style="font-family:HelveticaNeue-Light,Helvetica Neue Light,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:16px"> <div style="font-family:HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:16px"> <div dir="ltr"> <font face="Arial"> Em Quinta-feira, 23 de Outubro de 2014 16:50, Raphael Nishimura <<a href="mailto:raphael_nishimura@yahoo.com.br" target="_blank">raphael_nishimura@yahoo.com.br</a>> escreveu:<br> </font> </div><div><div class="h5">  <br><br> <div><div><div><div style="color:#000;background-color:#fff;font-family:HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"><div dir="ltr"><span>Neale,</span></div><div dir="ltr"><br clear="none"><span></span></div><div dir="ltr"><span>Gostaria de parabenizá-lo novamente por essa iniciativa, procurando deixar mais transparente o que você faz no PollingData (apesar de ainda achar que você deveria voltar a colocar </span><span><span>no site </span>as informações da metodologia que você usa com um pouco mais de detalhes técnicos). <br clear="none"></span></div><div dir="ltr"><br clear="none"><span></span></div><div dir="ltr"><span>Acho uma excelente ideia atribuir pesos diferentes para os institutos que levem em consideração outros fatores além do tamanho amostral da pesquisa. Você certamente conhece melhor do que eu a metodologia dos agregadores de dados americanos, mas me parece que Nate Silver, por exemplo, leva em consideração para a classificação não só a acurácia histórica dos institutos, como também as diferentes metodologias implementadas por eles (por exemplo, se usam telefone celular ou não). É interessante também que ele considera coisas como se o instituto participa da Iniciativa de Transparência da AAPOR (o que infelizmente não temos nada parecido no Brasil ainda) e se eles disponibilizam dados para o Roper Center (temos o CESOP da Unicamp aqui no Brasil, que é uma parceria com o Roper Center). Não sei se você viu, mas ele divulgou a
 metodologia de como ele cria essas classificações dos institutos nesse link: <a rel="nofollow" shape="rect" href="http://fivethirtyeight.com/features/how-fivethirtyeight-calculates-pollster-ratings/" target="_blank">http://fivethirtyeight.com/features/how-fivethirtyeight-calculates-pollster-ratings/</a> e também deixou disponível a base de dados dessa classificação com um monte de outros dados nesse outro link: <a rel="nofollow" shape="rect" href="https://github.com/fivethirtyeight/data/tree/master/pollster-ratings" target="_blank">https://github.com/fivethirtyeight/data/tree/master/pollster-ratings</a> O que é interessante é que aparentemente ele fez essa classificação com base em dados das pesquisas desde 1998. Claro que ele só pôde fazer isso porque há um considerável número de pesquisas eleitorais divulgadas nos EUA, bem maior do que
 no Brasil, mas talvez você possa adotar parte da metodologia dele na sua classificação. </span></div><br clear="none"><div dir="ltr">Olhando sua classificação, me parece que seria apenas interessante diferenciar de alguma forma o IBOPE do Datafolha, pois esse utiliza ponto de fluxo (como você identificou na sua outra mensagem), enquanto aquele usa uma amostra domiciliar, uma diferença que parece ser bastante importante.  <br clear="none"></div><div><br clear="none"></div><div>Um abraço,</div><div dir="ltr">Raphael<br clear="none"></div><div><br clear="none"><br clear="none"></div><div style="display:block"> <div style="font-family:HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px"> <div style="font-family:HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:16px"> <div dir="ltr"> <font face="Arial"> Em Quinta-feira, 23 de Outubro de 2014 12:31, Neale El-Dash <<a href="mailto:neale.eldash@gmail.com" target="_blank">neale.eldash@gmail.com</a>> escreveu:<br clear="none"> </font> </div>  <br clear="none"><br clear="none"> <div><div><div><div dir="ltr"><div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Faz mais de 12 anos
que trabalho com pesquisas eleitorais, mas meu foco sempre foi mais em produzir
pesquisas do que em consumi-las. Por causa do </span><span style="font-size:10pt"><a rel="nofollow" shape="rect" href="http://www.pollingdata.com.br/" target="_blank"><span style="color:rgb(56,110,255)" lang="EN-US">PollingData</span></a></span><span style="font-size:10pt" lang="EN-US"> (</span><span style="font-size:10pt"><a rel="nofollow" shape="rect" href="http://www.pollingdata.com.br/" target="_blank"><span style="color:rgb(56,110,255)" lang="EN-US">www.pollingdata.com.br</span></a></span><span style="font-size:10pt" lang="EN-US">) isso mudou. Até o
momento, procurei discutir mais a questão metodológica das pesquisas de opinião
e dos institutos de pesquisa. Porém existem muitos fatores “não-metodológicos”
que podem influenciar bastante os resultados das pesquisas.</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Nesse momento, o </span><span style="font-size:10pt"><a rel="nofollow" shape="rect" href="http://www.pollingdata.com.br/" target="_blank"><span style="color:rgb(56,110,255)" lang="EN-US">PollingData</span></a></span><span style="font-size:10pt" lang="EN-US"> está
acompanhando 14 eleições estaduais além da eleição presidencial, num total de </span><span style="font-size:10pt" lang="EN-US">186 pesquisas de 29 institutos de pesquisas. Como esse
é o primeiro ano do site, ainda não temos um histórico muito grande, e a
maioria dos institutos têm poucas pesquisas divulgadas. Ou seja, é dificil
avaliar a metodologia de cada pesquisa para cada uma desses institutos.
Realmente difícil.</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Além da questão
metodológica, existe a possibilidade de fraude também. Abaixo inclui alguns
links com exemplos desse tipo de problema. Claro que as fontes também são
questionáveis, pois aqui no Brasil muitas vezes se discute política como se
fosse um jogo de futebol, muita emoção e pouca razão. Como se existisse um lado
certo e um lado errado. Independente disso, a possibilidade de fraude sempre
existe.</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt"><a rel="nofollow" shape="rect" href="http://exame.abril.com.br/brasil/noticias/campanha-de-dilma-questiona-pesquisa-do-instituto-parana" target="_blank"><span style="color:rgb(56,110,255)" lang="EN-US">http://exame.abril.com.br/brasil/noticias/campanha-de-dilma-questiona-pesquisa-do-instituto-parana</span></a></span><span style="font-size:10pt" lang="EN-US"></span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt"><a rel="nofollow" shape="rect" href="http://www.revistaforum.com.br/blogdorovai/2014/10/08/epoca-divulga-pesquisa-fajuta-para-beneficiar-aecio/" target="_blank"><span style="color:rgb(56,110,255)" lang="EN-US">http://www.revistaforum.com.br/blogdorovai/2014/10/08/epoca-divulga-pesquisa-fajuta-para-beneficiar-aecio/</span></a></span><span style="font-size:10pt" lang="EN-US"></span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Já trabalhei com
pesquisas para consumo interno de políticos em campanha. Há muita pressão
externa. E a pressão é ENORME! Consigo apenas imaginar como deve ser no caso de
pesquisas que serão publicadas. E existem muitas formas diferentes dessa “pressão”
alterar os resultados das pesquisas. Algumas mais diretas, outras indiretas.
Algumas mais intencionais, outras nem tanto. Alterar ordem das perguntas do
questionário, alterar o texto das perguntas, não rodiziar nomes de candidatos,
incluir o partido junto com o nome do candidato ou não, escolher
regiões/cidades/bairros sabidamente favoráveis a um partido, testar diversas
ponderações e escolher a que faz mais sentido – ou que tenha o melhor resultado
segundo algum critério. Existem muitas outras formas que nem estou mencionando
aqui. Abaixo, segue mais um link com um exemplo.</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><font color="#386eff"><u><a rel="nofollow" shape="rect" href="http://politica.estadao.com.br/noticias/eleicoes,metodologia-de-pesquisa-beneficia-pre-candidato-tucano-imp-,1161716" target="_blank">http://politica.estadao.com.br/noticias/eleicoes,metodologia-de-pesquisa-beneficia-pre-candidato-tucano-imp-,1161716</a></u></font><br clear="none"></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Pela lei, para
publicar uma pesquisa, o instituto é obrigado a divulgar quem é o contratante.
Essa informação seria bastante relevante pra tentar avaliar se há algum conflito
de interesses entre o resultado da pesquisa e quem encomendou a pesquisa. Porém
virou prática comum o instituto dizer que foi ele mesmo que financiou a
pesquisa. Em alguns casos é verdade. Em outros, o objetivo é esconder a fonte
dos recursos.</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Outra forma, talvez
mais sútil de publicar resultados favoráveis, é fazendo um tracking (diário ou
em períodos com menor frequência). Registra-se então pesquisas no TSE em vários
dias diferentes, porém a pesquisa somente é publicada nos dias que apresentam
uma variação amostral na direção conveniente ao contratante.  Note
que nesse caso, a metodologia pode ser “perfeita”, porém o que está sendo
publicando tem um viés. Isso explicaria, por
exemplo, o número muito maior de pesquisas registradas do que publicadas.</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Estou discutindo esses
pontos aqui pra mostrar como a lei, do jeito que está, tem muitas falhas. Ter
algum tipo de fiscalização já faria alguma diferença.  Eu trabalho
com pesquisas, tenho enorme prazer em trabalhar com elas, sei que podem ser
bem-feitas e acredito que são muito importantes para a democracia. Mas é
necessário acabar com  a corrupção e a manipulação de
resultados. </span><b><span style="font-size:10pt" lang="EN-US">E por favor, não usem esse texto
pra argumentar pelo fim das pesquisas, pois como todos sabem, a corru</span></b><b><span style="font-size:10pt" lang="EN-US">pção está presente em
todo Brasil, principalmente em tudo que envolve a esfera política. A idéia não
é proibir, mas sim melhorar</span></b><b><span style="font-size:10pt" lang="EN-US">!</span></b><span style="font-size:10pt" lang="EN-US"> Também acredito
que conforme o mercado das pesquisas eleitorais no Brasil amadurece, ele também
será capaz de se auto-regular. Um dos nossos objetivos é que o PollingData faça
parte desse movimento.</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Eu sei que os parágrafos anteriores </span>estão<span style="font-size:10pt" lang="EN-US"> um pouco exagerados pro contexto que estou discutindo aqui, mas
meu ponto é: será que no modelo do </span><span style="font-size:10pt"><a rel="nofollow" shape="rect" href="http://www.pollingdata.com.br/" target="_blank"><span style="color:rgb(56,110,255)" lang="EN-US">PollingData</span></a></span><span style="font-size:10pt" lang="EN-US">, pesquisas de todos
os institutos devem ter um peso igual, ou seja, que depende somente do tamanho
da amostra? Tenho certeza que o modelo será otimizado (em algum sentido) se
pesquisas com metodologias mais questionáveis, ou institutos sem histórico, ou ainda
institutos com a credibilidade questionável tiverem um peso diferenciado,
reduzindo assim sua influência nas estimativas do modelo. Por enquanto, não vou
retirar nenhuma pesquisa de nenhum instituto do modelo. Mas pretendo rever essa
política caso haja fortes evidências de fraude.</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Não tenham dúvidas que
o critério para atribuir pesos aos institutos será bastante subjetivo,
principalmente nesse primeiro ano onde não temos um histórico grande de
pesquisas. Isso também evoluirá com o tempo</span><span style="font-size:10pt" lang="EN-US">, esse é apenas o primeiro passo.
Acredito que num futuro próximo será possível definir um ranking de qualidade dos
institutos de pesquisa. Por enquanto, nosso critério distinguirá apenas três
grupos: 1) Institutos que têm um histórico conhecido e confiável, 2) Institutos
que estão trabalhando para partidos politicos nesse ciclo eleitoral, e 3)
Institutos pequenos ou com pouco histórico.</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Os pesos serão
simplesmente aplicados diretamente no tamanho da amostra de cada instituto.
Institutos do grupo ‘2’ <span style="font-size:10pt;font-family:Arial,sans-serif">terão uma precisão máxima de +/- 4% e do grupo
‘3’ serão limitados por +/- 5%</span>. </span><span style="font-size:10pt" lang="EN-US">Segue
abaixo a relação dos institutos em cada grupo. Nas
próximas horas o </span><span style="font-size:10pt"><a rel="nofollow" shape="rect" href="http://www.pollingdata.com.br/" target="_blank"><span style="color:rgb(56,110,255)" lang="EN-US">PollingData</span></a></span><span style="font-size:10pt" lang="EN-US"> estará
atualizado utilizando esses pesos. Acessem o site pra ver os novos resutados</span><span style="font-size:10pt">….</span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US">Críticas e sugestões
são muito bem vindas!</span><span style="font-size:10pt" lang="EN-US"></span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div align="center">

<table style="width:204pt;margin-left:2.75pt;border-collapse:collapse" width="272" border="0" cellpadding="0" cellspacing="0"><tbody><tr style="height:30.75pt"><td colspan="1" rowspan="1" style="width:47pt;border-style:solid solid none;border-top-color:windowtext;border-right-color:windowtext;border-left-color:windowtext;border-top-width:1pt;border-right-width:1pt;border-left-width:1pt;padding:0cm 3.5pt;height:30.75pt" nowrap width="63">
  <div style="text-align:justify"><b><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Grupo</span></b></div>
  </td><td colspan="1" rowspan="1" style="width:86pt;border-style:solid solid none none;border-top-color:windowtext;border-top-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:30.75pt" nowrap width="115">
  <div style="text-align:justify"><b><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Instituto</span></b></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:solid solid none none;border-top-color:windowtext;border-top-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:30.75pt" width="95">
  <div style="text-align:justify"><b><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Pesquisas no PollingData</span></b></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="3" style="width:47pt;border-style:solid;border-color:windowtext windowtext black;border-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap width="63">
  <div style="text-align:justify"><span style="font-size:20pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td><td colspan="1" rowspan="1" style="width:86pt;border-style:solid solid solid none;border-top-color:windowtext;border-right-color:windowtext;border-bottom-color:windowtext;border-top-width:1pt;border-right-width:1pt;border-bottom-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Ibope</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:solid solid solid none;border-top-color:windowtext;border-right-color:windowtext;border-bottom-color:windowtext;border-top-width:1pt;border-right-width:1pt;border-bottom-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">66</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Datafolha</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">37</span></div>
  </td></tr><tr style="height:15.75pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15.75pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">MDA</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15.75pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">13</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="2" style="width:47pt;border-style:none solid solid;border-left-color:windowtext;border-left-width:1pt;border-bottom-color:black;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap width="63">
  <div style="text-align:justify"><span style="font-size:20pt;font-family:Calibri,sans-serif;color:black">2</span></div>
  </td><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Sensus (PSDB)</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">10</span></div>
  </td></tr><tr style="height:15.75pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15.75pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Vox Populi (PT)</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15.75pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">9</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="24" style="width:47pt;border-style:none solid solid;border-left-color:windowtext;border-left-width:1pt;border-bottom-color:black;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap width="63">
  <div style="text-align:justify"><span style="font-size:20pt;font-family:Calibri,sans-serif;color:black">3</span></div>
  </td><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Fortiori</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">6</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Serpes</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">5</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Grupom</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">4</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Veritá</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">4</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Delta</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">3</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Iveiga</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">3</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Seta</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">3</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Gerp</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">2</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">IDP</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">2</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">O&P Brasil</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">2</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Souza Lopes</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">2</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Verus</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">2</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Instituto Verita</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">2</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Action</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Datamax</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">DMP</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">EPP</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">FSB</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">GPP</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Ibrape</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Ipespe</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Methodus</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Vale</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr><tr style="height:15.75pt"><td colspan="1" rowspan="1" style="width:86pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15.75pt" nowrap valign="bottom" width="115">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">Parana Pesquisas</span></div>
  </td><td colspan="1" rowspan="1" style="width:71pt;border-style:none solid solid none;border-bottom-color:windowtext;border-bottom-width:1pt;border-right-color:windowtext;border-right-width:1pt;padding:0cm 3.5pt;height:15.75pt" nowrap valign="bottom" width="95">
  <div style="text-align:justify"><span style="font-size:11pt;font-family:Calibri,sans-serif;color:black">1</span></div>
  </td></tr></tbody></table>

</div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt" lang="EN-US"> </span></div>

<div style="text-align:justify"><span style="font-size:10pt"> </span></div><div><br clear="none"></div><div dir="ltr"><div><br clear="none">-----------------------------------------------<br clear="none">Neale Ahmed El-Dash<br clear="none">Doutor em Estatística<br clear="none">Celular: <a href="tel:%2B55%2019%20998893939" value="+5519998893939" target="_blank">+55 19 998893939</a><br clear="none">Email: <a rel="nofollow" shape="rect" href="mailto:neale.eldash@gmail.com" target="_blank">neale.eldash@gmail.com</a><div style="display:inline"></div></div></div>
</div></div></div><br clear="none">_______________________________________________<br clear="none">abe mailing list<br clear="none"><a rel="nofollow" shape="rect" href="mailto:abe@lists.ime.usp.br" target="_blank">abe@lists.ime.usp.br</a><br clear="none"><a rel="nofollow" shape="rect" href="https://lists.ime.usp.br/mailman/listinfo/abe" target="_blank">https://lists.ime.usp.br/mailman/listinfo/abe</a><br clear="none"><br clear="none"><br clear="none"></div>  </div> </div>  </div> </div></div></div><br><div>_______________________________________________<br clear="none">abe mailing list<br clear="none"><a shape="rect" href="mailto:abe@lists.ime.usp.br" target="_blank">abe@lists.ime.usp.br</a><br clear="none"><a shape="rect" href="https://lists.ime.usp.br/mailman/listinfo/abe" target="_blank">https://lists.ime.usp.br/mailman/listinfo/abe</a><br clear="none"></div><br><br></div>  </div></div></div> </div>  </div> </div></div><br>_______________________________________________<br>
abe mailing list<br>
<a href="mailto:abe@lists.ime.usp.br">abe@lists.ime.usp.br</a><br>
<a href="https://lists.ime.usp.br/mailman/listinfo/abe" target="_blank">https://lists.ime.usp.br/mailman/listinfo/abe</a><br>
<br></blockquote></div><br><br clear="all"><div><br></div>-- <br><div dir="ltr"><div><br></div>There are two routes to success in soccer. One is being good. The other is being lucky. You need both to win a championship. But you only need one to win a game. (The numbers game)<br><div><br>-----------------------------------------------<br>Neale Ahmed El-Dash<br>Doutor em Estatística<br>Celular: +55 19 998893939<br>Email: <a href="mailto:neale.eldash@gmail.com" target="_blank">neale.eldash@gmail.com</a><div style="display:inline"></div></div></div>
</div>