Jednym z najczęstszych problemów projektów środowiskowych jest koncentracja na tym, co łatwo policzyć, zamiast na tym, co rzeczywiście świadczy o zmianie. Łatwo wykazać liczbę zorganizowanych szkoleń, uczestników konferencji, przygotowanych raportów, posadzonych drzew lub kilometrów nowej infrastruktury. Znacznie trudniej odpowiedzieć na pytanie, czy działania te doprowadziły do trwałej poprawy środowiskowej.
W projekcie LIFE rozróżnienie pomiędzy produktem, rezultatem i oddziaływaniem powinno być podstawą całej logiki interwencji. Szkolenie jest produktem. Wdrożenie przez uczestników nowych procedur jest rezultatem. Ograniczenie zużycia energii, emisji lub ilości wytwarzanych odpadów stanowi oddziaływanie.
Podobnie jest w przypadku narzędzia cyfrowego. Opracowanie aplikacji jest produktem projektu. Jej regularne wykorzystywanie w zarządzaniu przedsiębiorstwem można uznać za rezultat. Dopiero decyzje podjęte dzięki pozyskanym danym oraz osiągnięte oszczędności zasobów pokazują rzeczywisty wpływ.
Aby taki wpływ można było wykazać, potrzebny jest wiarygodny punkt odniesienia. Wartość bazowa opisuje stan przed rozpoczęciem działań i umożliwia porównanie go z sytuacją po wdrożeniu rozwiązania. Bez niej nawet poprawnie zrealizowany projekt może nie być w stanie udowodnić swojej skuteczności.
Jeżeli celem projektu jest ograniczenie zużycia energii, należy wiedzieć, ile energii zużywano wcześniej, jakie procesy odpowiadały za największe zapotrzebowanie i jak na wynik wpływała wielkość produkcji. Porównanie samych rachunków może prowadzić do błędnych wniosków. Zużycie energii może wzrosnąć mimo poprawy efektywności, jeżeli przedsiębiorstwo znacząco zwiększy produkcję. Dlatego bardziej miarodajnym wskaźnikiem będzie zużycie energii na jednostkę produktu lub godzinę pracy instalacji.
Podobnej ostrożności wymaga ocena projektów związanych z wodą. Całkowity pobór wody może ulec zmniejszeniu wskutek ograniczenia produkcji, a nie dzięki wdrożonemu rozwiązaniu. Ekspercka analiza powinna zatem uwzględniać intensywność produkcji, strukturę procesów, warunki technologiczne oraz jakość strumieni wodnych.
W projektach transportowych wyzwaniem jest ustalenie, czy obserwowany wzrost ruchu rowerowego rzeczywiście oznacza zmniejszenie liczby podróży samochodowych. Liczba użytkowników trasy sama w sobie nie jest wystarczającym dowodem redukcji emisji. Część osób może wcześniej poruszać się pieszo, korzystać z innej trasy rowerowej albo podejmować dodatkową aktywność rekreacyjną.
Dlatego badania powinny obejmować nie tylko liczenie rowerzystów, lecz również sposób podróżowania przed realizacją inwestycji, cel podróży, częstotliwość korzystania z trasy oraz dystans zastąpionego przejazdu samochodowego. Dopiero połączenie pomiaru ruchu i badania zachowań pozwala zbliżyć się do rzeczywistego efektu klimatycznego.
Szczególną ostrożność należy zachować przy korzystaniu z deklaracji ankietowych. Respondenci często wyrażają gotowość do zmiany zachowania, ale nie każda deklaracja zostaje zrealizowana. Osoba może twierdzić, że po wybudowaniu trasy zacznie regularnie jeździć rowerem, lecz ostateczna decyzja będzie zależeć od pogody, bezpieczeństwa, czasu podróży, stanu zdrowia oraz możliwości przewożenia dzieci lub zakupów.
Dane ankietowe są więc wartościowym źródłem informacji, ale powinny być traktowane jako podstawa scenariusza, a nie automatyczna prognoza. Najlepsze rezultaty daje łączenie deklaracji z pomiarami rzeczywistymi, danymi administracyjnymi i obserwacją zachowań po zakończeniu inwestycji.
Podobny problem występuje w projektach adaptacyjnych. Liczba posadzonych drzew jest prostym wskaźnikiem wykonania zadania, ale niewiele mówi o trwałości efektu. Jeżeli część sadzonek nie przetrwa pierwszych lat, drzewa nie rozwiną koron lub zostaną posadzone w miejscach o ograniczonej dostępności wody, ich wpływ na temperaturę, retencję i jakość przestrzeni będzie ograniczony.
Lepszym zestawem wskaźników będzie przeżywalność nasadzeń po kilku sezonach, powierzchnia rozwiniętych koron, zmiana temperatury powierzchni, ilość zatrzymanej wody i wpływ na komfort termiczny. Wymaga to bardziej złożonego monitorowania, ale pozwala ocenić funkcjonowanie rozwiązania, a nie tylko jego wykonanie.
W projektach gospodarki o obiegu zamkniętym należy natomiast uważać, aby nie utożsamiać zwiększenia ilości odpadów przekazanych do odzysku z pełnym sukcesem środowiskowym. Proces odzysku może wymagać znacznych ilości energii, transportu lub substancji chemicznych. Rozwiązanie może poprawiać jeden wskaźnik, a jednocześnie zwiększać obciążenie w innym miejscu.
Dlatego analiza powinna obejmować istotne skutki całego procesu. Jeżeli odpad zastępuje surowiec pierwotny, należy sprawdzić, jaka ilość surowca została rzeczywiście uniknięta, czy materiał zachowuje odpowiednią jakość oraz czy dodatkowe przetwarzanie nie powoduje nieproporcjonalnego wzrostu zużycia energii.
Dobry system monitorowania nie musi być nadmiernie rozbudowany. Powinien jednak odpowiadać na podstawowe pytania: co chcemy zmienić, jaki jest stan początkowy, jaki wynik chcemy osiągnąć, skąd pochodzą dane i w jaki sposób potwierdzimy, że zmiana wynika z działań projektu.
W projektach LIFE wiarygodność nie polega na prezentowaniu wyników z pozorną matematyczną precyzją. Polega na transparentnym pokazaniu metody, założeń, źródeł danych i ograniczeń. Wynik scenariuszowy może być wartościowy, jeżeli jest jasno opisany jako scenariusz. Model może wspierać decyzje, jeżeli nie jest przedstawiany jako pomiar. Ankieta może stanowić podstawę projektu, jeżeli jej wyniki zostaną później zweryfikowane w rzeczywistych warunkach.
To właśnie jakość danych i sposób ich interpretacji decydują, czy projekt potrafi wykazać rzeczywistą zmianę, czy jedynie udokumentować wykonanie zaplanowanych działań.