Listening Score — jak brzmi miasto, którego się słucha

Każde miasto twierdzi, że słucha swoich mieszkańców. Prawie żadne nie potrafi tego udowodnić.

Ta przepaść — między komunikatem prasowym a doświadczeniem codziennym — to właśnie problem, który Listening Score próbuje zamknąć. Jest to jeden z dziewięciu wymiarów The Pulse, złożonego wskaźnika miejskiego Cittopii. Jako jedyny wymiar nie opiera się na istniejącym strumieniu danych z Eurostatu lub miejskiego portalu otwartych danych. Zbudowaliśmy go sami, ponieważ nic porównywalnego nie istniało.

Ten artykuł wyjaśnia, co Listening Score faktycznie mierzy, dlaczego pięć składników a nie jeden, co pomija w wersji v0.1 i dlaczego w ogóle publikujemy tę formułę na publicznej stronie.

Pytanie, na które ma odpowiedzieć wskaźnik

Wyobraź sobie, że jesteś mieszkańcem Warszawy, Stambułu lub Sofii. Składasz uwagę w ramach konsultacji społecznych dotyczących nowej linii tramwajowej. Co dzieje się dalej?

Zwykle jedna z trzech rzeczy. W najgorszym wypadku — nic. Uwaga znika w PDF-ie, którego nikt nie czyta. W średnim wypadku dostajesz automatyczną wiadomość z podziękowaniem, a po sześciu miesiącach miasto publikuje raport zbiorczy, który może (albo nie) wspomnieć o problemie, który podniosłeś. W najlepszym wypadku plan projektu się zmienia, zmiana jest przypisana wkładowi mieszkańców, a Ty otrzymujesz informację, że Twoja konkretna uwaga została uwzględniona — albo, co równie ważne, świadomie odrzucona z uzasadnieniem.

Większość wskaźników partycypacji w literaturze mierzy nakłady: liczbę uwag, godziny spotkań publicznych, rejestracje na platformie. Są to przydatne wskaźniki strony podażowej — mówią, czy kanały istnieją. Nie mówią natomiast, czy kanały te są podłączone do czegokolwiek. Listening Score to próba zmierzenia, czy są podłączone.

Formuła — pięć składników, każdy ograniczony do 20 punktów

Każdy z pięciu składników daje wynik od 0 do 20. Listening Score to ich suma: 0–100.

Formuła celowo waży odpowiedź, zamknięcie pętli i ślad decyzyjny równo z zasięgiem i różnorodnością. Miasto z doskonałą frekwencją, ale zerowym zamknięciem pętli ma sufit na poziomie 60 punktów. Miasto z umiarkowaną frekwencją, ale doskonałym zamknięciem pętli może je przewyższyć.

To nie przypadek. To centralna teza metodologiczna wskaźnika: słuchanie jest dyscypliną back-endową, nie front-endową. Trudna część to nie formularz. Trudna część to odpowiedź, która następuje po formularzu.

Miasto z doskonałą frekwencją, ale zerowym zamknięciem pętli ma sufit na poziomie 60. Miasto z umiarkowaną frekwencją, ale doskonałym zamknięciem pętli może je przewyższyć.

— Notatka projektowa Listening Score, metodologia Cittopia v0.1

Jak wygląda dobry wynik

W białej księdze metodologicznej kotwiczymy poziomy odniesieniami:

• 80–100 — Słuchanie zorganizowane. Miasto wyznaczyło dyrekcję, opublikowało podręcznik partycypacji i rutynowo cytuje wkład mieszkańców w formalnych decyzjach. Najwyraźniejsze przykłady w Europie znaleźliśmy w Helsinkach, Madrycie (w okresie Decide Madrid) i częściowo w Brukseli.
• 60–79 — Słuchanie zdolne. Infrastruktura istnieje, kilka kanałów działa, ale zamknięcie pętli jest niespójne, a ślad decyzyjny rzadki. Tu plasuje się większość dobrze finansowanych stolic europejskich.
• 40–59 — Słuchanie aspiracyjne. Miasto mówi o partycypacji, prowadzi okazjonalne sztandarowe konsultacje, ale codzienne słuchanie nie jest zinstytucjonalizowane.
• 20–39 — Słuchanie symboliczne. Partycypacja jest performatywna — coroczna ankieta, jedno spotkanie publiczne na projekt.
• 0–19 — Brak słuchania. Brak wiarygodnych kanałów, brak opublikowanych follow-upów, brak śladowych decyzji cytujących wkład.

To nie są oceny. To próba uczynienia wskaźnika zrozumiałym dla niespecjalisty w 30 sekund. Urzędnik miejski, który osiąga 47 punktów, powinien móc natychmiast powiedzieć, która luka najszybciej przeniesie miasto do następnego pasma.

Co v0.1 robi źle (i wiemy o tym)

Wskaźnik jest w wersji 0.1 z powodu. Pięć szczerych ograniczeń:

1. Stronniczość małej próby. Miasto, które prowadzi trzy głębokie konsultacje z bogatym zamknięciem pętli, może wyprzedzić miasto, które prowadzi trzysta płytkich. To filozoficznie właściwy kierunek — ale oznacza, że małe miasta z aktywnymi prezydentami mogą sztucznie zawyżać wyniki wobec większych miast z cieńszym zaangażowaniem per capita.

2. Stronniczość kanałów cyfrowych. Większość danych, które możemy zbierać na skalę, jest cyfrowa. Stosujemy grube dostosowanie dla partycypacji analogowej (spotkania osobiste, ratusze, zgłoszenia papierowe), ale to oszacowanie. Miasta z silną kulturą analogową (części Włoch, polska prowincja) wypadają niżej, niż prawdopodobnie zasługują.

3. Asymetria językowa. Obecnie analizujemy dokumenty follow-up po angielsku, polsku, turecku, niemiecku, francusku, włosku, hiszpańsku i niderlandzku. Miasta publikujące głównie w językach UE o słabszej reprezentacji otrzymują manualną weryfikację jako fallback, co jest wolniejsze i mniej spójne.

4. „Mieszkaniec" jest niejednoznaczny. Czy uwzględniamy rezydentów bez obywatelstwa? Turystów? Osoby pracujące w mieście, ale mieszkające gdzie indziej? Różne konsultacje definiują to inaczej. Idziemy za definicją każdej konsultacji. Wynik zbiorczy miesza więc jabłka z gruszkami w sposób, który ujawniamy per miasto.

5. Zamknięcie pętli jest najtrudniejszym składnikiem do weryfikacji. Pytanie „czy miasto naprawdę wykorzystało wkład?" wymaga przeczytania dokumentu follow-up i oceny intencji. Robimy to hybrydowym potokiem (ekstrakcja regułowa plus weryfikacja ludzka w sytuacjach granicznych), ale miasto publikujące pozornie wyrafinowane, a w praktyce próżne follow-upy może zdobyć wyższy wynik niż jego prawdziwa pozycja.

Dlaczego to w ogóle istnieje

Eurostat publikuje ankietę „zaufanie do władz lokalnych". OECD publikuje dane partycypacyjne Better Life Index. SDSN śledzi wskaźniki SDG 16. Wszystkie są przydatne i korzystamy z kilku jako zasileń.

Żaden z nich nie mówi, czy miasto odpowiada. Mówią, czy mieszkańcy czują się wysłuchani, co jest innym (i wartościowym) pomiarem. Listening Score to ekwiwalent z punktu widzenia back-officu: nie co mieszkańcy czują, ale co miasto demonstracyjnie robi z tym, co mieszkańcy mówią.

Te dwie zmienne silnie korelują w miastach, dla których mamy pełne dane. Rozjeżdżają się — zwykle — w dwóch wzorcach:

• Zaufanie > Słuchanie. Miasto ma silną reputację partycypacyjną, ale dane o zamknięciu pętli są skąpe. Często znak reputacji odziedziczonej z poprzedniej kadencji.
• Słuchanie > Zaufanie. Miasto wykonuje pracę back-office, ale nie komunikuje jej dobrze. Często znak okazji — lepsza komunikacja mogłaby przesunąć wskaźnik zaufania w górę w ciągu 18 miesięcy bez zmiany żadnego ukrytego zachowania.

Każdy z tych wzorców to przydatna informacja dla biura prezydenta miasta lub organizacji civic-tech. Pierwszy mówi: „twoja reputacja się rozpadnie, jeśli nie naprawisz instalacji". Drugi mówi: „twoja instalacja jest dobra, twoja narracja jest zepsuta".

Dokąd to zmierza dalej

Wersja v0.2 metodologii, planowana na Q3 2026:

• Doda ważenie według typu konsultacji (głosowanie budżetowe waży więcej niż ankieta nadania nazwy parkowi)
• Doda kanał manualnego nadpisania, aby miasta mogły zgłosić dokumenty follow-up, które przegapiliśmy
• Triangulować oceny zamknięcia pętli ze strukturalnym zewnętrznym panelem (akademicy + praktycy civic-tech) na 10 losowo wybranych miastach na kwartał
• Publikować szeregi czasowe per składnik dla każdego miasta, tak aby 12-miesięczna trajektoria słuchania stała się widoczna
• Przetłumaczyć formułę i pasma na język polski i turecki (Faza 1 naszego planu internacjonalizacji)

Jesteśmy też transparentni, które miasta obecnie wypadają jak — i dlaczego. Publikacja ta jest częścią wrześniowego studium danych o 30 stolicach europejskich. Jeśli jesteś badaczem, dziennikarzem lub urzędnikiem miejskim, który chce zakwestionować formułę zanim zostanie szeroko opublikowana: methodology@cittopia.com.

Sens publikowania tego teraz

Każdy wskaźnik jest też wyborem politycznym. Publikując formułę Listening Score na publicznej stronie — z jej składnikami, pasmami, ujawnieniami stronniczości i ograniczeń — zapraszamy do krytyki wcześniej, niż jest to wygodne.

To cena otwartej metodologii. Alternatywa to wysłać wskaźnik, twierdzić, że działa, a potem bronić tego twierdzenia. Wolimy wysłać wskaźnik, nazwać jego słabości i pozwolić ludziom, którzy je zauważą, je znaleźć.

Jeśli jakąś dostrzeżesz, skrzynka jest otwarta.