poniedziałek, 28 kwietnia 2014

Dlaczego nie warto zajmować się sondażami do eurowyborów?

Ciekawie, chociaż zbyt krótko, odpowiada prof. Mirosław Szreder z Uniwersytetu Gdańskiego na stronach "Rzeczpospolitej".

Sondaż GFK 2014-04-08


Mocno spóźniony wynik z pracowni GFK. Tym razem pomógł anonimowy komentator, bo na stronie z listą komunikatów prasowych niestety tego nie znalazłem.

Badanie zrealizowano w dniach 3-8. kwietnia na próbie 1020 osób. Szacowana frekwencja to 57%.
Wynik mojej analizy:
Kluczowe informacje:

  • PiS na 93% przed PO
  • PO na pewno przed SLD, obie partie na pewno w Sejmie
  • PSL ma 41% na wejście do parlamentu, na 82% z wynikiem lepszym od TR
  • Twój Ruch ma 4% szans na pokonanie progu wyborczego, na 96% osiągnie wynik lepszy od KNP
  • pozostałe ugrupowania mają mniej niż jedną szansę na sto na pokonanie progu wyborczego
Porównanie z sondażem z marca:
W wynikach GFK charakterystyczna jest bardzo duża zmienność rezultatu PSL.

Porównanie z sondażem z lutego umieszczam tylko poglądowo, ponieważ w lutym podstawą były odpowiedzi bez uwzględnienia opcji "inna partia")
Tak zmieniała się relacja pomiędzy PiS, a PO w ostatnich trzech miesiącach:
A dokładnie:
Kluczowe obserwacje:
  • w sondażach GFK z ostatnich dwóch miesięcy nie można było wskazać lidera z 95% pewnością
  • w najnowszym sondażu na 95% różnica pomiędzy poparciem dla PO, a poparciem dla PiS wynosi od 1 punktu procentowego przewagi PO do 12 punktów przewagi PiS

czwartek, 17 kwietnia 2014

Sondaż Homo Homini dla WP 2014-04-14

Wyniki nowego sondażu Homo Homini dla Wirtualnej Polski. Badanie wykonano 14. kwietnia na próbie 1067 osób.
Zamiast nieznanej frekwencji przyjmuję 55%.

Wyniki mojej analizy:
Kluczowe informacje:

  • PiS przed PO na 72%
  • PSL/TR w Sejmie na 47%
  • PSL/TR przed KNP na 78%
  • KNP ma 10% szans, aby wejść do parlamentu, na 76% z wynikiem lepszym od Polski Razem
  • PR ma jedną szansę na sto na pokonanie progu wyborczego
To porównanie z sondażem sprzed dwóch tygodni:
Straty w notowaniach największych partii. A to porównanie z sondażem sprzed miesiąca:
Tracą PiS i PO, a kto zyskał? Trochę KNP i PR, trochę TR, trochę SLD.

PiS i PO tracą, ale zobaczmy jak zmieniała się relacja pomiędzy poparciem dla tych ugrupowań w ostatnim miesiącu:
Dokładniej:
Kluczowe obserwacje:
  • zgodnie z wynikami najnowszego sondażu można mieć 95% pewności, że różnica pomiędzy poparciem dla PO, a poparciem dla PiS wynosi od prawie 4 punktów procentowych przewagi PO do prawie 8 punktów przewagi PiS
  • w żadnym z ostatnich trzech sondaży nie było 95% pewności co do lidera

środa, 16 kwietnia 2014

Sondaż TNS 2014-04-09

Kolejny rezultat, który podaję z opóźnieniem, to wynik sondażu TNS. Badanie wykonano w dniach 4-9. kwietnia na próbie 973 osób. Podana frekwencja wynosi 55%.
Wynik mojej analizy:
Kluczowe informacje:

  • PiS przed PO na 80%, PO na pewno przed SLD, SLD na pewno przed PSL
  • PSL ma 50% szans na wejście do parlamentu, prawie na pewno z wynikiem lepszym od TR, KNP, PR oraz SP
To ostatnio jedyny sondaż, który wskazuje na zwycięstwo PiS. Ta sama pracownia w ostatnim sondażu dla TVP Info pokazała jako lidera PO.

Porównanie z sondażem sprzed miesiąca:
oraz z sondażem sprzed dwóch miesięcy:
Widać wzrost poparcia dla PO oraz statystycznie istotny spadek poparcia dla TR.

Zobaczmy, jak według TNS wyglądała relacja pomiędzy poparciem dla PiS oraz PO w ostatnich trzech miesiącach.
Mimo, że w tej rundzie PO jeszcze nie jest liderem, to jednak trend jest jednoznaczny. Dokładniej:
Kluczowe obserwacje:
  • w najnowszym sondażu różnica poparcia pomiędzy PO, a PiS na 95% wynosi od 3 punktów procentowych przewagi PO do 9 punktów przewagi PiS
  • niepewność do do lidera pojawiła się miesiąc temu, wcześniej niekwestionowanym (na poziomie 95% zaufania) liderem był PiS

wtorek, 15 kwietnia 2014

Sondaż CBOS 2014-04-09

Kolejny z zaległych sondaży to bardzo kontrowersyjny wynik z bardzo kontrowersyjnej pracowni. Sondaż CBOS wykonano w dniach 3-9 kwietnia na próbie 1028 osób. Szacowana frekwencja to 52%.
Niewiarygodnie duży wzrost poparcia dla PO

Wynik mojej analizy:
Kluczowe obserwacje:

  • PO przed PiS na 99%
  • SLD w Sejmie na 97%, SLD z wynikiem lepszym od KNP lub PSL na 88%
  • PSL oraz KNP mają 52% szans na wejście do Sejmu, na 95% z wynikiem lepszym od PR
  • PR ma jedną szansę na sto na pokonanie progu wyborczego
Porównanie z sondażem sprzed miesiąca:
oraz tym sprzed dwóch miesięcy:
Wzrost poparcia dla PO jest statystycznie istotny.

A tak zmieniała się różnica pomiędzy PO, a PiS w ostatnich trzech sondażach CBOS:
Widać wyraźny trend. Dokładniej:
Kluczowe obserwacje:
  • w poprzednich dwóch miesiącach nie było lidera, co do którego można byłoby mieć pewność na poziomie 95%
  • w najnowszym sondażu przewaga PO nad PiS na 95% wynosi od 1 do 12 punktów procentowych

Sondaż SMG/KRC 2014-04-08

Wystarczyło wyjechać na kilka dni poza południową granicę, a tu takie niespodzianki.

Pierwszy z zaległych sondaży to wynik badania MillwardBrown dla TVN. Sondaż wykonano 8. kwietnia na próbie 1012 osób.
Przy nieznanej frekwencji przyjąłem wartość 77% z poprzedniego sondażu TNS.

Wynik mojej analizy:
Kluczowe informacje:

  • PO przed PiS na 76%
  • SLD na pewno w Sejmie, na 73% przed PSL
  • PSL prawie na pewno w Sejmie, na 48% przed Twoim Ruchem
  • Twój Ruch również prawie na pewno przekroczy próg wyborczy, na 77% z wynikiem lepszym od KNP
  • KNP ma 89% szans na wejście do parlamentu, na pewno z wynikiem lepszym od SP
  • pozostałe ugrupowania mają mniej niż jedną szansę na sto na przekroczenie progu wyborczego
Oto porównanie z poprzednim sondażem:
oraz z jeszcze wcześniejszym, z początku marca:
Wzrost poparcia dla PO choć widoczny, to nie jest statystycznie istotny w tym przedziale czasu.

Zobaczmy jak wyglądał rozkład przewagi PiS nad PO w ostatnich sondażach MillwardBrown:
Widać zdecydowaną różnicę w najnowszym rezultacie:
Kluczowe obserwacje:
  • w żadnym z sondaży wykonanych przez MillwardBrown od początku marca nie można mieć 95% pewności co do lidera
  • w najnowszym wyniku na 95% różnica pomiędzy poparciem dla PO, a poparciem dla PiS wynosi od 7 punktów przewagi PO do 3 punktów przewagi PiS

wtorek, 8 kwietnia 2014

Sondaż Homo Homini dla Rzeczpospolitej 2014-04-05

Pierwszy w kwietniu sondaż Homo Homini dla Rzeczpospolitej. Badanie wykonano na próbie 1100 osób w dniach 3-5. kwietnia. Frekwencja jest nieznana, więc przyjmuję tę z ostatniego badania TNS.
Wynik mojej analizy:
Kluczowe informacje:

  • PiS przed PO na 98%
  • SLD na pewno na trzecim miejscu, na pewno w Sejmie
  • PSL ma 47% szans na wejście do parlamentu, na 98% z wynikiem lepszym od KNP lub TR
  • pozostałe ugrupowania mają mniej niż jedną szansę na sto na pokonanie progu wyborczego
Porównanie z sondażem przed dwóch tygodni:
Różnice są minimalne, żadna nie jest statystycznie istotna.

A to porównanie z sondażem sprzed miesiąca:

Tak zmieniała się przewaga PiS nad PO w ostatnim miesiącu:
Jak widać przewaga nie zmieniała się wcale. Różne szerokości pudełek wynikają tylko z różnej przyjmowanej frekwencji.
Kluczowe obserwacje:
  • na 95% przewaga PiS nad PO w najnowszym sondażu wynosi od 0 do 10 punktów procentowych
  • średnia przewaga PiS nad PO w ostatnim miesiącu według Homo Homini była stała

poniedziałek, 7 kwietnia 2014

Sondaż TNS dla TVP Info 2014-04-03

Drugi kwietniowy sondaż to wynik TNS przygotowany na zlecenie TVP Info. Badanie wykonano w dniach 2-3. kwietnia na próbie 1000 osób.

Nie wiem, w jaki sposób zostali wybrani respondenci, ale aż 773 osoby z próby 1000 planują iść na wybory. To rezultat podobnego rzędu, co w poprzednich sondażach TNS dla TVP, ale zupełnie nie przystaje do rzeczywistości.

Wynik mojej analizy:
Kluczowe informacje:

  • PO przed PiS na 64%
  • SLD na pewno w Sejmie jako trzecia partia
  • KNP, PSL, Twój Ruch mają jednakową 51% szansę na wejście do Sejmu
  • każde z tych ugrupowań ma 98% szans na wynik lepszy od SP oraz PR
  • Solidarna Polska oraz Polska Razem mają mniej niż jedną szansę na sto na pokonanie progu wyborczego
Dla przypomnienia, jak rozumieć te 64%. Myślę, że najprościej (i w duchu bayesowskiego rozumowania) będzie użyć jako wytłumaczenia zakładu.

Jeśli według tych wyników PO wyprzedza PiS na 64%, to mógłbym postawić na zwycięstwo PO w zakładzie, w którym za każdą moją złotówkę bukmacher wypłaci mi co najmniej 1,56zł.
Dlaczego? Ponieważ 64% * 1,56zł = 1zł, więc wartość oczekiwana takiego zakładu daje mi co najmniej zwrot kapitału.

Gdyby to prawdopodobieństwo wynosiło tylko 50%, to żądałbym 2zł za każdą złotówkę postawioną na PO.

Porównanie z sondażem sprzed miesiąca:
Dramatyczny spadek poparcia dla PiS oraz lekki wzrost poparcia dla KNP są statystycznie istotne.

Oto poparcie z sondażem sprzed dwóch miesięcy:

Spójrzmy jeszcze, jak zmieniała się relacja pomiędzy PO, a PiS w sondażach TNS dla TVP z ostatnich trzech miesięcy:
Dokładniej:
Kluczowe obserwacje:
  • w żadnym z ostatnich sondaży nie można było wskazać z 95% pewnością lidera
  • w najnowszym sondażu różnica pomiędzy PO, a PiS wynosi na 95% od 6 punktów przewagi PO do 4 punktów przewagi PiS

czwartek, 3 kwietnia 2014

Sondaż Homo Homini dla WP 2014-04-01

Nowy miesiąc otwieramy wynikami sondażu Homo Homini dla Wirtualnej Polski. Badanie wykonano 1. kwietnia, próba wyniosła 1067 osób, a frekwencji (jak zwykle) nie podano.

Wynik mojej analizy:
Kluczowe informacje:

  • PiS przed PO na 83%
  • PO na pewno przed SLD, SLD na pewno przed PSL
  • PSL ma 50% szans na wejście do Sejmu, 78% szans na wynik wyborczy lepszy od TR
  • Twój Ruch ma 11% szans na zasiadanie w parlamencie, 96% szans na wynik lepszy od KNP
  • KNP, SP, PR mają mniej niż jedną szansę na sto na przekroczenie progu wyborczego
Oto porównanie z poprzednim sondażem:
Różnice są niewielkie. A to porównanie z sondażem sprzed miesiąca:

W komentarzu na wp.pl czytamy:
Prof. Norbert Maliszewski, którego Wirtualna Polska poprosiła o skomentowanie wyników wskazuje, że PiS zyskuje, ale wkrótce sondażowy lider może się zmienić
A ja dopiero co zdążyłem napisać, że PiS stoi w miejscu.

Spójrzmy zatem jak zmieniała się relacja pomiędzy PiS, a PO w ostatnich sondażach:
Dokładniej:
Kluczowe obserwacje:

  • zgodnie z wynikami najnowszego sondażu można mieć 95% pewność, że różnica pomiędzy poparciem dla PO, a poparciem dla PiS wynosi od 3 punktów procentowych przewagi PO do 9 punktów przewagi PiS
  • w żadnym z sondaży z ostatniego miesiąca nie 95% pewności co do lidera

wtorek, 1 kwietnia 2014

Podsumowanie marca

Oto wyniki modelu zatrzymane w czasie na dzień ostatniego sondażu w marcu: 2014-03-22. Do modelu wchodzą wyłącznie sondaże dotyczące wyborów na Sejm.

Techniczny opis modelu można znaleźć tutaj. Przedstawiane niżej liczby dotyczą poparcia w grupie osób zdecydowanych co do pójścia na wybory i jednocześnie zdecydowanych na ugrupowanie, na które chcą głosować.

Zacznijmy od wykresu z wynikami historycznymi - od momentu nieco przed poprzednimi wyborami aż do dnia ostatniego znanego sondażu.
Szare linie to kanały, w których na 95% znajduje się rzeczywiste poparcie dla danej partii. Pionowa linia wyznacza dzień poprzednich wyborów parlamentarnych.

W ostatnim miesiącu widać stagnację PiS, wybicie PO i spadek SLD. Czas pokaże, jak sytuacja rozwinie się dalej.

Oto wyniki na dzień ostatniego sondażu:

Liczby po prawej stronie to średnia wartość poparcia, liczby w nawiasach, to przedział, w którym na 95% znajduje się rzeczywiste poparcie danej partii.

Wyniki na ostatni dzień w miesiącu pokazywałyby te same wartości średnie, tylko z szerszymi przedziałami ufności, czyli z większą niepewnością.

Wykres poniżej obrazuje średni rozrzut pomiędzy wynikami danej sondażowni, a wynikami zagregowanego modelu. Można z niego np. odczytać, że ewybory.eu średnio podaje zawyżony wynik dla TR i zaniżony dla PO.

Ta sama informacja bardziej konkretnie (kolorowe pola oznaczają wartości na 95% różne od zera):


Inaczej: wyniki podawane przez ewybory.eu podają poparcie dla TR średnio większe o 4 punkty procentowe od poparcia z modelu.

Patrząc na wiersze tabeli widzimy, że żadna z sondażowni nie ustrzegła się przed podawaniem obciążonych wyników. Najgorzej pod tym względem wyglądają wyniki z portalu ewybory.eu, które są istotnie obciążone dla każdej z partii.

Spoglądając na kolumny widać, że największa zgodność pomiędzy pracowniami panuje przy podawaniu wyników SLD oraz PiS.