Sprawozdanie specjalne
nr25 2019

Jakość danych wykorzystywanych na potrzeby wsparcia budżetowego – uchybienia w niektórych wskaźnikach i w procedurach weryfikacji stosowanych przy wypłacaniu transz zmiennych

Informacje na temat sprawozdania Wsparcie budżetowe jest formą pomocy unijnej polegającą na przekazaniu środków pieniężnych do skarbu państwa kraju partnerskiego, pod warunkiem że kraj ten spełni uzgodnione wcześniej warunki płatności. Wsparcie to wypłaca się w formie transz stałych albo transz zmiennych. Kwoty wypłacone w ramach transz zmiennych zależą od wyników uzyskanych przez kraje partnerskie. Wyniki te są mierzone z wykorzystaniem wcześniej określonych wskaźników wykonania. Trybunał zbadał, czy Komisja wykorzystywała adekwatne i wiarygodne dane dotyczące wyników przy wypłacaniu transz zmiennych w ramach wsparcia budżetowego. Stwierdził, że w przypadku jednej trzeciej wskaźników wykonania objętych przeglądem występowały uchybienia w koncepcji wskaźnika, w wyniku których trudno było jednoznacznie rozstrzygnąć, czy wartości docelowe zostały osiągnięte. Ponadto przeprowadzona przez Komisję ocena, czy osiągnięto założone wartości wskaźników warunkujących wypłatę transz zmiennych, nie zawsze była wiarygodna. Trybunał przedstawił szereg zaleceń dotyczących: udoskonalenia koncepcji wskaźników, częstszego korzystania ze wskaźników wyniku na potrzeby transz zmiennych oraz usprawnienia weryfikacji danych na temat wyników wykorzystywanych na potrzeby wypłacania środków w ramach transz zmiennych.
Sprawozdanie specjalne Europejskiego Trybunału Obrachunkowego przedstawiono na mocy art. 287 ust. 4 akapit drugi TFUE.

Publikacja jest dostępna w 23 językach i w następującym formacie:
PDF
PDF General Report

Streszczenie

I

Wsparcie budżetowe jest formą pomocy unijnej polegającą na przekazaniu środków pieniężnych do skarbu państwa kraju partnerskiego, pod warunkiem że kraj ten spełni uzgodnione wcześniej warunki płatności. Unia Europejska jest największym darczyńcą na świecie, jeśli chodzi o wsparcie budżetowe. Średnie roczne płatności w ramach unijnego wsparcia wynoszą 1,69 mld euro. Wsparcie to wypłaca się w formie transz stałych albo transz zmiennych. Około 44% płatności w ramach wsparcia budżetowego świadczonego przez UE wykonuje się w ramach transz zmiennych, przy czym odsetek ten sięga nawet 90% w przypadku niektórych krajów objętych unijną polityką sąsiedztwa. Kwoty wypłacone w ramach transz zmiennych zależą od wyników uzyskanych przez kraje partnerskie, które to wyniki mierzy się z wykorzystaniem wcześniej określonych wskaźników wykonania.

II

Trybunał zbadał, czy Komisja wykorzystywała adekwatne i wiarygodne dane dotyczące wyników przy wypłacaniu transz zmiennych w ramach wsparcia budżetowego. Stwierdził, że w przypadku jednej trzeciej wskaźników wykonania objętych analizą przyjęta koncepcja niekorzystnie wpłynęła na ich adekwatność, bowiem nie pozwalały one na obiektywny pomiar uzyskanych rezultatów. Ponadto przeprowadzona przez Komisję ocena, czy osiągnięto założone wartości wskaźników warunkujących wypłatę transz zmiennych, nie zawsze była wiarygodna, co prowadziło w niektórych przypadkach do niedostatecznie uzasadnionych płatności.

III

Wprawdzie wskaźniki wykonania warunkujące wypłatę transz zmiennych dostosowano do sektorowych strategii rozwoju w krajach partnerskich, ale większość z nich dotyczyła przede wszystkim krótkoterminowych działań, a nie długofalowych rezultatów, w tym stopniowych postępów na drodze do realizacji celów zrównoważonego rozwoju. Ponadto w przypadku ponad jednej trzeciej wskaźników definicje były niejasne lub podano nieprawidłowe wartości wyjściowe bądź nie podano zgoła żadnych takich wartości. W rezultacie trudno było jednoznacznie rozstrzygnąć, czy wartości docelowe zostały osiągnięte, co sprawiało, że proces analizowania wniosków o wypłatę środków był bardziej złożony i mniej obiektywny.

IV

W przypadku większej części skontrolowanych transz zmiennych udało się wywołać zamierzone skutki w postaci zachęt dla krajów partnerskich na rzecz realizowania programów reform dzięki ustanowieniu odpowiednio ambitnych poziomów docelowych. Niewielka liczba wykrytych przez Trybunał wyjątków w tym względzie dotyczyła wskaźników z wartościami docelowymi, które łatwo było osiągnąć lub które zostały osiągnięte dzięki działaniom zrealizowanym przez innych darczyńców lub ekspertów zewnętrznych wynagradzanych ze środków UE. Liczba wskaźników wykorzystywanych na potrzeby poszczególnych transz zmiennych była zbyt duża w przypadku sześciu z 24 umów, co dodatkowo skomplikowało proces wypłacania środków.

V

Wnioski o wypłatę środków w ramach transz zmiennych zawierają analizę spełnienia uzgodnionych warunków i osiągnięcia założonych wartości wskaźników wykonania. Wnioski te są opracowywane przez kraje partnerskie i z tego względu wiarygodność danych leżących u podstaw wniosków zależy od zdolności tych krajów do wygenerowania takich danych. Trybunał stwierdził, że jedynie w przypadku pięciu z 24 wybranych umów Komisja sformułowała wyraźne wnioski co do wiarygodności danych na temat wyników koniecznych do obliczenia wskaźników warunkujących wypłatę transzy zmiennej. Analizując wnioski o wypłatę środków, delegatury UE korzystały z niejednorodnych procedur przy weryfikowaniu wiarygodności tych danych. Niektóre z tych procedur nie gwarantowały, że płatności w ramach transz zmiennych realizuje się w oparciu o wiarygodne dane, i w związku z tym nie były one w pełni uzasadnione.

VI

Kontrolerzy Trybunału przeprowadzili ponownie zrealizowane przez Komisję oceny osiągnięcia założonych wskaźników oraz ponownie obliczyli płatności w ramach transz zmiennych na łączną kwotę 234 mln euro. Stwierdzono rozbieżności o wartości 16,7 mln euro. Z tej kwoty płatności na 13,3 mln euro nie były wystarczająco uzasadnione lub nie były zgodne z postanowieniami umów, natomiast kwotę 3,4 mln euro wypłacono pomimo nieosiągnięcia faktycznych postępów. Dodatkowo 26,3 mln euro w ramach trzech transz zmiennych wypłacono na rzecz Mołdawii, choć nie udokumentowano w wystarczającym stopniu dowodów uzasadniających te płatności.

VII

Trybunał przedstawił Komisji sześć zaleceń, w myśl których powinna ona:

  • częściej korzystać ze wskaźników wyniku na potrzeby transz zmiennych;
  • udoskonalić koncepcję wskaźników wykonania;
  • zapewnić, by transze zmienne wywoływały odpowiedni efekt zachęty;
  • uprościć proces wypłacania transz zmiennych;
  • udoskonalić oceny zdolności poszczególnych krajów do generowania danych na temat wyników wykorzystywanych na potrzeby transz zmiennych;
  • usprawnić weryfikację tych danych.

Wstęp

Koncepcja wsparcia budżetowego

01

Wsparcie budżetowe jest formą pomocy unijnej polegającą na przekazaniu środków pieniężnych do skarbu państwa kraju partnerskiego, pod warunkiem że kraj ten spełni uzgodnione wcześniej warunki płatności. Otrzymane w ten sposób środki finansowe trafiają do budżetu kraju partnerskiego i mogą być wykorzystane wedle uznania władz tego kraju. Komisja utrzymuje, że wsparcie budżetowe stanowi instrument świadczenia skutecznej pomocy i osiągania trwałych rezultatów, jeśli chodzi o wspieranie realizacji reform przez partnerów UE oraz osiąganie celów zrównoważonego rozwoju.

02

Obok przekazywania środków pieniężnych wsparcie budżetowe obejmuje: (i) dialog z krajem partnerskim na temat reform lub rezultatów w zakresie rozwoju, do których realizacji lub osiągnięcia może przyczynić się świadczone wsparcie budżetowe; (ii) ocenę osiągniętych postępów; (iii) wsparcie na rzecz rozwoju zdolności. Wsparcie budżetowe oznacza przejście od tradycyjnego podejścia skoncentrowanego na określonych działaniach (np. projektach) w stronę pomocy ukierunkowanej na osiąganie rezultatów.

03

Unia Europejska jest największym darczyńcą na świecie, jeśli chodzi o wsparcie budżetowe (zarówno za pośrednictwem budżetu UE, jak i Europejskich Funduszy Rozwoju). W latach 2014–2017 UE przeznaczyła na wsparcie budżetowe około 11% (zob. załącznik I) środków na dwustronną pomoc rozwojową – kwota rocznych średnich wydatków wyniosła około 2,13 mld euro. W 2017 r. zapewniono wsparcie budżetowe na rzecz 90 krajów i terytoriów, które otrzymały łącznie 1,8 mld euro. Całkowita kwota objęta zobowiązaniami w ramach wszystkich obecnie realizowanych umów o świadczenie wsparcia budżetowego wynosi 12,7 mld euro. Na rys. 1 przedstawiono te kwoty w podziale na poszczególne regiony, zarówno w odniesieniu do ogólnego budżetu UE, jak i Europejskich Funduszy Rozwoju.

Rys. 1

Bieżące zobowiązania i środki wypłacone w ramach wsparcia budżetowego na koniec 2017 r. w podziale na regiony

(w mln euro)

Źródło: Europejski Trybunał Obrachunkowy, na podstawie publikacji Komisji z 2018 r. pt. „Budget Support: Trends and Results” [Wsparcie budżetowe – tendencje i rezultaty].

04

Udzielenie przez UE wsparcia budżetowego jest uzależnione od tego, czy kraj beneficjent wprowadził oraz faktycznie realizuje właściwe i wiarygodne strategie polityczne. Zgodnie z przepisami rozporządzenia finansowego państwo można uznać za kwalifikujące się do otrzymania wsparcia budżetowego, w przypadku gdy1:

  • zarządzanie finansami publicznymi w państwie partnerskim jest wystarczająco przejrzyste, rzetelne i skuteczne;
  • państwo partnerskie wprowadziło wystarczająco wiarygodne i właściwe polityki sektorowe i krajowe;
  • państwo partnerskie wprowadziło polityki makroekonomiczne ukierunkowane na stabilność;
  • państwo partnerskie wprowadziło wystarczający i terminowy dostęp do wyczerpujących i rzetelnych informacji budżetowych.
05

Komisja Europejska podpisuje trzy rodzaje umów o świadczenie wsparcia budżetowego:

  1. umowa dotycząca celów zrównoważonego rozwoju (ang. Sustainable Development Goals contract – SDGC), mająca na celu zapewnienie wsparcia na rzecz polityk i strategii krajowych, jeśli chodzi o osiągnięcie postępów w realizacji celów zrównoważonego rozwoju;
  2. umowa o realizację reformy sektorowej (ang. Sector Reform Performance contract – SRPC), mająca na celu zapewnienie wsparcia na rzecz określonych reform sektorowych;
  3. umowa dotycząca budowania państwowości i odporności (ang. State and Resilience Building contract – SRBC), obejmująca kraje znajdujące się w niestabilnej sytuacji, mająca na celu zagwarantowanie, że pełnione będą podstawowe funkcje państwa, lub wsparcie procesów formowania się demokratycznych rządów.
06

Zdecydowana większość programów wsparcia budżetowego realizowanych przez Komisję opiera się na SRPC (stanowiły one 74% wszystkich bieżących zobowiązań w ramach wsparcia budżetowego w 2017 r.). Jeśli chodzi o przydział środków, czterema sektorami korzystającymi w największym stopniu ze wsparcia udzielanego na podstawie SRPC są: edukacja, rolnictwo i rozwój obszarów wiejskich, zdrowie publiczne i energia.

Zmienne transze jako zachęta do osiągania rezultatów

07

Przed każdym wypłatą środków Komisja sprawdza, czy spełnione zostały ogólne warunki załączone do umowy o świadczenie wsparcia budżetowego. Warunki te w większości przypadków odnoszą się do warunków kwalifikowalności dotyczących wsparcia budżetowego (zob. pkt 04). Wsparcie to wypłaca się w formie transz stałych albo transz zmiennych. Transze stałe są wypłacane w całości (gdy wszystkie warunki są spełnione) lub nie są wypłacane w ogóle (jeżeli co najmniej jeden warunek nie jest spełniony), transze zmienne natomiast stosuje się, by stworzyć dla krajów partnerskich zachęty do poprawienia osiąganych rezultatów polityki. Wypłaca się je na podstawie uzyskanych wyników mierzonych względem określonych wskaźników wykonania i poziomów docelowych, z zastrzeżeniem że wszystkie warunki ogólne muszą być spełnione. Transze zmienne mogą być wypłacone w całości lub w części. Wskaźniki wykonania stosowane na potrzeby transz zmiennych są wybierane z systemów monitorowania już stosowanych przez kraj partnerski lub określane z wykorzystaniem wspólnych ram oceny wyników uzgodnionych z krajem partnerskim i innymi darczyńcami.

08

W odniesieniu do polityki publicznej można korzystać z różnego rodzaju wskaźników wykonania (zob. ramka 1). Ogólnie rzecz ujmując, Komisja zaleca stosowanie wskaźników wyniku, ale inne rodzaje wskaźników również mogą okazać się odpowiednie w zależności od szczególnych uwarunkowań danego kraju partnerskiego lub sektora.

Ramka 1

Rodzaje wskaźników wykonania wraz z przykładami

Definicja* Przykłady wskaźników zastosowanych w skontrolowanych umowach**
Wkład Zasoby finansowe, ludzkie i materialne, które są uruchamiane na potrzeby realizacji danego programu
  • Środki budżetowe przydzielone na projekty skierowane w szczególności do kobiet
Proces Podjęte działania polityczne i regulacyjne
  • Przyjęcie zgodnych z regulacjami UE przepisów w zakresie kontroli celnych żywności na granicy
Produkty Bezpośrednie i konkretne skutki wykorzystania zasobów i podjęcia działań
  • Renowacja budynków publicznych
  • Wprowadzenie nowych mechanizmów komercyjnych na szczeblu lokalnym
  • Opracowanie koncepcji systemu zarządzania informacjami o nauczycielach (systemu TMIS)
Wyniki Rezultaty osiągnięte na poziomie beneficjentów
  • Zapewnienie kształcenia dobrej jakości syryjskim uczniom przebywającym w społecznościach przyjmujących i obozach
  • Zwiększenie odsetka lokalnych społeczności obsługiwanych przez regularne połączenia przewozu osób
  • Objęcie ubezpieczeniem zdrowotnym osób żyjących na skraju ubóstwa
Oddziaływanie Konsekwencje osiągnięcia zamierzonych wyników, jeśli chodzi o oddziaływanie na osiągnięcie bardziej ogólnego celu
  • Zmniejszenie współczynnika umieralności niemowląt
  • Zmniejszenie powierzchni uprawy koki
  • Usprawnienie kontroli wydatków i powiązanej sprawozdawczości

Źródło: * wytyczne Komisji Europejskiej z 2017 r. dotyczące wsparcia budżetowego oraz ** Europejski Trybunał Obrachunkowy.

09

Do każdego wskaźnika wykonania przypisano wartość finansową. Jeden ze sposobów, w jaki Komisja oblicza kwoty wypłacane w ramach transzy zmiennej, polega na sumowaniu kwot powiązanych z poszczególnymi wskaźnikami wykonania, dla których dany kraj spełnił wymagane warunki. Oznacza to, że im większa liczba wskaźników, dla których dany kraj partnerski spełnił warunki, tym większa część transzy zmiennej zostanie wypłacona.

10

W 2017 r. 44% płatności zrealizowanych przez Komisję na podstawie umów o świadczenie wsparcia budżetowego wykonano w ramach transz zmiennych2, przy czym odsetek ten sięga nawet 90% w przypadku niektórych krajów objętych unijną polityką sąsiedztwa. Na rys. 2 przedstawiono informacje na temat transz zmiennych wypłaconych na podstawie umów SRPC w 2017 r. w podziale na poszczególne kraje.

Rys. 2

Umowy o realizację reformy sektorowej, wypłaty transz zmiennych w 2017 r.

Źródło: Europejski Trybunał Obrachunkowy, na podstawie danych Komisji.

Wypłacanie transz zmiennych

11

Proces wypłacania transzy zmiennej rozpoczyna się w momencie złożenia przez kraj partnerski wniosku o wypłatę środków. We wniosku tym zawarta jest analiza, w jakim stopniu osiągnięto założone wartości wskaźników wykonania. Następnie delegatury UE badają złożone wnioski i sporządzają notę z oceny. Na podstawie tego dokumentu i po zatwierdzeniu przez komitet sterujący ds. wsparcia budżetowego Komisja podejmuje decyzję co do kwoty, jaka powinna zostać wypłacona w ramach transzy zmiennej (zob. rys. 3).

12

Przedstawioną przez kraj partnerski analizę wyników, która jest załączona do wniosku o wypłatę środków, sporządza się w oparciu o dane z krajowych systemów monitorowania i oceny. Te systemy krajowe stanowią zatem podstawowe źródło informacji na potrzeby wypłacania środków w ramach transz zmiennych.

Rys. 3

Proces wypłacania środków

Źródło: Europejski Trybunał Obrachunkowy, na podstawie wytycznych Komisji dotyczących wsparcia budżetowego.

Zakres kontroli i podejście kontrolne

13

W przyjętym w 2017 r. unijnym konsensusie na rzecz rozwoju zwrócono uwagę na doniosłą rolę, jaką odgrywa wsparcie budżetowe w popieraniu wysiłków krajów partnerskich na rzecz osiągnięcia celów zrównoważonego rozwoju. Zważywszy że dużą część płatności w ramach wsparcia budżetowego stanowią transze zmienne oraz biorąc pod uwagę fakt, że dane leżące u podstaw tych płatności są generowane przez same zainteresowane kraje, występowanie nieprawidłowych lub niewiarygodnych danych oznaczałoby, że płatności w ramach wsparcia budżetowego nie premiują faktycznego osiągnięcia rezultatów tak jak zamierzono. Taka sytuacja stawiałaby pod znakiem zapytania zasadność wsparcia budżetowego. Niniejsza kontrola była więc ukierunkowana na zbadanie ilości i jakości (tj. adekwatności i wiarygodności) wskaźników wykonania wykorzystywanych na potrzeby transz zmiennych. Kontrolą objęto także analizę Komisji dotyczącą przedłożonych wniosków o płatność.

14

Główne pytanie kontrolne brzmiało: czy Komisja wykorzystywała adekwatne i wiarygodne dane dotyczące wyników przy wypłacaniu transz zmiennych w ramach wsparcia budżetowego? Aby odpowiedzieć na to zasadnicze pytanie, kontrolerzy podzielili je na następujące pytania szczegółowe:

  1. Czy w umowach o świadczenie wsparcia budżetowego uwzględniono wskaźniki, które pozwalają na skuteczne monitorowanie odpowiednich rezultatów uzyskanych w sektorach objętych wsparciem?
  2. Czy Komisja skutecznie weryfikowała wiarygodność danych dotyczących wyników zawartych we wnioskach o wypłatę transz zmiennych?
15

Kontrolą objęto próbę 24 umów o realizację reformy sektorowej (zob. załącznik II) zawartych z ośmioma krajami partnerskimi, na rzecz których wypłacono największe kwoty transz zmiennych w 2017 r.3 Kraje te łącznie otrzymały 43,29% całkowitej kwoty płatności w ramach transz zmiennych zrealizowanych w tym roku. W skontrolowanych transzach zmiennych realizowanych w ramach umów ujętych w próbie zastosowano łącznie 248 wskaźników wykonania. W załączniku III przedstawiono szczegółowo płatności zrealizowane w 2017 r. i sektory objęte kontrolą.

16

W odniesieniu do umów ujętych w próbie Trybunał przeanalizował sposób, w jaki Komisja oceniła, czy poszczególne systemy krajowe są w stanie zapewnić wiarygodne dane na temat wyników. Kontrolerzy Trybunału przyjrzeli się również konstrukcji postanowień umów o świadczenie wsparcia budżetowego, w szczególności w odniesieniu do jakości wskaźników wykonania wykorzystywanych na potrzeby transz zmiennych. Przeanalizowali także procedury weryfikowania przez Komisję danych zawartych we wnioskach o wypłatę transz zmiennych. W trakcie tej analizy kontrolerzy Trybunału przeprowadzili przegląd dokumentów płatności sporządzonych przez Komisję i dokonali ponownej oceny, czy osiągnięto wartości docelowe, a także ponownie obliczyli kwoty płatności w ramach transz zmiennych. Swoje ustalenia porównali następnie z wnioskami Komisji.

17

Kontrola objęła wizyty w trzech państwach – Jordanii, Gruzji i Boliwii. Podczas tych wizyt w lutym i marcu 2019 r. kontrolerzy Trybunału przeprowadzili wywiady z pracownikami Komisji i przedstawicielami władz krajowych oraz innych darczyńców i zainteresowanych stron. Obok czynności kontrolnych zrealizowanych także w pozostałych państwach wybranych na potrzeby kontroli w tych trzech krajach kontrolerzy Trybunału przeprowadzili ponownie procedury stosowane przez Komisję przy weryfikacji wniosków o wypłatę transzy zmiennej i odnośnych płatności oraz porównali uzyskane rezultaty z rezultatami analizy przeprowadzonej przez Komisję. Ponadto zestawili dane na temat wyników zgłoszone przez kraje partnerskie z danymi pochodzącymi z innych źródeł dowodów – od ekspertów zewnętrznych i innych darczyńców – tak aby ocenić ich wiarygodność.

Uwagi

Przyjęta koncepcja niekorzystnie wpłynęła na adekwatność wskaźników warunkujących wypłatę transz zmiennych

18

Trybunał zbadał, czy: (i) wskaźniki wykonania są adekwatne, jeśli chodzi o osiągnięcie celów określonych w umowach o świadczenie wsparcia budżetowego, oraz zostały dostosowane do strategii krajowych; (ii) zapewniają solidną podstawę do monitorowania uzyskanych istotnych rezultatów.

Wskaźniki są spójne z krajowymi strategiami sektorowymi, ale zostały w przeważającej mierze ukierunkowane na krótkoterminowe działania, a nie długofalowe rezultaty

19

Komisja uznaje wsparcie budżetowe za instrument świadczenia pomocy w oparciu o uzyskane rezultaty. Pomoc opartą na podejściu projektowym przyznaje się na pokrycie kwalifikowalnych wydatków, natomiast transze zmienne w ramach wsparcia budżetowego są wypłacane, gdy krajom partnerskim udaje się spełnić warunki ogólne i osiągnąć uzgodnione wcześniej rezultaty. Osiągnięcie rezultatów mierzy się za pomocą wybranych wskaźników wykonania, w związku z czym adekwatność wypłaconych transz zmiennych zależy od tego, czy wspomniane wskaźniki wykonania pozwalają zmierzyć istotne rezultaty.

20

Zgodnie z informacjami przedstawionymi w ramce 1 istnieje pięć rodzajów wskaźników. Wskaźniki wkładu, procesu i produktu mają największe znaczenie w bieżącym zarządzaniu programami wydatkowania środków publicznych, natomiast wskaźniki wyniku i oddziaływania pozwalają zmierzyć długofalowe skutki, takie jak postępy w realizacji reform i programów na drodze do osiągnięcia wyznaczonych celów, np. celów zrównoważonego rozwoju. Na rys. 4 przedstawiono przykładowo różne rodzaje wskaźników wykorzystywanych w ramach jednego z programów wsparcia budżetowego w Boliwii.

Rys. 4

Sekwencyjny schemat osiągania rezultatów i powiązane różne rodzaje wskaźników wykonania

Źródło: sekwencyjny schemat osiągania rezultatów opracowany przez Komitet Pomocy Rozwojowej OECD i stosowany przy realizacji działań zewnętrznych UE.

21

W wytycznych dotyczących wsparcia budżetowego dopuszczono wykorzystanie każdego z wyżej wspomnianych rodzajów wskaźników. Komisja stoi niemniej na stanowisku, że pierwszeństwo należy przyznać wskaźnikom wyniku, ponieważ sprzyjają one kształtowaniu polityki w oparciu o dowody, zapewniają krajom partnerskim polityczną swobodę, jeśli chodzi o wybór własnych polityk i strategii pozwalających osiągnąć zamierzone wyniki, a także zwiększają zapotrzebowanie na informacje statystyczne dobrej jakości. Im większe zaufanie do zdolności organów rządowych kraju partnerskiego w zakresie generowania wiarygodnych danych, tym większy nacisk należy położyć na wskaźniki wyniku. Trybunał uznaje ponadto wskaźniki oddziaływania za przydatne narzędzia pomiaru rezultatów, zwłaszcza w odniesieniu do osiągania celów zrównoważonego rozwoju.

22

Przeprowadzona przez Trybunał analiza 248 wskaźników przewidzianych w skontrolowanych umowach wskazuje, że są one dostosowane do strategii sektorowych realizowanych w krajach partnerskich. Niemniej środki w ramach transz zmiennych wypłacane są głównie w oparciu o wskaźniki wkładu, procesu i produktu, które łącznie stanowią 87% całkowitej liczby wskaźników. Jedynie 33 wskaźniki (13%) mierzyły osiągnięte wyniki i oddziaływanie (zob. rys. 5).

Rys. 5

Rodzaj wskaźników wykorzystywanych na potrzeby transz zmiennych w ramach skontrolowanych programów

Źródło: Europejski Trybunał Obrachunkowy.

23

Trybunał ustalił, że większość wskaźników wyniku i oddziaływania zastosowano w krajach o niskim lub średnim niższym dochodzie, podczas gdy w krajach o średnim wyższym dochodzie, takich jak Jordania i Gruzja, posiadających większe zdolności w zakresie generowania danych na temat osiągniętych wyników, zastosowano jedynie cztery wskaźniki wyniku i żadnych wskaźników oddziaływania. Wskazuje to, że wybór wskaźnika nie musi być powiązany ze stopniem rozwoju danego kraju.

24

Wskaźniki wkładu zastosowane w skontrolowanych transzach zmiennych odnosiły się głównie do zakupu towarów (18 przypadków) i zwiększenia przydzielonych środków budżetowych (dziewięć przypadków). Zwiększenie środków budżetowych lub zakup sprzętu mogą doprowadzić do zmian w określonym obszarze zainteresowania, ale nie przekładają się automatycznie na osiągnięcie istotnych postępów.

25

Wskaźniki procesu mogą odgrywać użyteczną rolę, w szczególności w przypadkach gdy dana polityka jest ukierunkowana na wprowadzenie zmian w ramach regulacyjnych. Niemniej – jak wskazano w wytycznych – wskaźniki te nie powinny dotyczyć wyłącznie procesów, ale powinny pozwalać zmierzyć również aspekty jakościowe, np. jakimi kwestiami ma zająć się utworzony podmiot itd.4 Nie we wszystkich przypadkach stosowano się do tego zalecenia. W ramce 2 przedstawiono przykłady wskaźników, w przypadku których nie określono żadnych minimalnych wymogów jakościowych, jeśli chodzi o zawartość lub strukturę przekazywanych informacji. Utrudnia to dopilnowanie, by transze zmienne stanowiły premię za realizację procesów dobrej jakości.

Ramka 2

Przykłady wskaźników procesu pozbawionych jakichkolwiek specyfikacji jakościowych

W umowie dotyczącej planu działania na rzecz liberalizacji reżimu wizowego w Mołdawii (umowa nr 15) jeden ze wskaźników odnosi się do zatwierdzenia ram regulacyjnych na potrzeby obowiązkowej rejestracji zgłoszonych przestępstw. Brak jest przy tym jakichkolwiek informacji na temat jakości i zawartości tych ram.

W umowie zawartej z Jordanią i dotyczącej sektora energii (umowa nr 4) wartość docelowa dla jednego ze wskaźników zakłada, że „pod przewodnictwem Ministerstwa Energii i Surowców Mineralnych uruchomiony zostanie organ dialogu politycznego z udziałem wielu stron, przy czym organ ten będzie regularnie zbierał się na spotkaniach”. Nie określono jednak w żaden sposób, jak często te spotkania miałyby się odbywać.

Jedna trzecia wskaźników nie pozwala na obiektywny pomiar rezultatów

26

Wskaźniki wykorzystywane do pomiaru postępów w realizacji polityki publicznej muszą być szczegółowe. Należy przypisać im określone ilościowo i wymierne poziomy docelowe oraz w stosownych przypadkach wiarygodny poziom wyjściowy. W przeciwnym razie obiektywny pomiar osiągniętych postępów nie jest możliwy. Wskaźniki, poziomy wyjściowe i docelowe należy uzgodnić w momencie formułowania umowy o świadczenie wsparcia budżetowego, a następnie szczegółowo określić w umowie w sprawie finansowania. Choć w wytycznych stwierdzono, że należy unikać wprowadzania zmian do wskaźników, zmiana poziomów docelowych w trakcie realizacji umowy może okazać się konieczna w celu uwzględnienia nowych okoliczności lub skorygowania błędów, które wystąpiły przy określaniu poziomów wyjściowych lub obliczaniu wskaźników.

27

Analiza Trybunału wykazała, że 72 wskaźniki (stanowiące 29% dobranej próby) nie były wystarczająco szczegółowe. Takie nieszczegółowe wskaźniki sprawiają problemy zwłaszcza przy analizowaniu wniosków o wypłatę środków – istnieje ryzyko rozbieżności w ocenie, czy poziomy docelowe zostały osiągnięte. To z kolei może prowadzić do zróżnicowanych wyników przy obliczaniu kwoty transzy zmiennej, która powinna zostać wypłacona.

28

29% wskaźników sformułowano w sposób nieprecyzyjny, bez określonych ilościowo poziomów docelowych, a z wykorzystaniem wyrażeń takich jak „poprawić”, „zwiększyć ukierunkowanie” czy „przedstawić dowody”. Trybunał odnotował, że umowy dotyczące sektora rolnictwa zawierały największy odsetek wskaźników szczegółowych (86,5%), tymczasem w obszarze zarządzania finansami publicznymi szczegółowe było jedynie 60% wskaźników. W ramce 3 przedstawiono przykłady nieszczegółowych wskaźników i wpływ, jaki mają te wskaźniki na obliczanie kwot wypłacanych w ramach transz zmiennych.

Ramka 3

Przykłady nieszczegółowych wskaźników i poziomów docelowych

  • W ramach umowy „Wsparcie na rzecz drugiego etapu reformy edukacji w Jordanii” (umowa nr 1) określono wartość docelową dla wskaźnika 5 w brzmieniu: „wyposażenie i uruchomienie sześciu szkół wraz z zapewnieniem odpowiednich środków / warunków nauczania oraz odpowiednich zasobów ludzkich”. W umowie w sprawie finansowania nie zdefiniowano wystarczająco szczegółowo, co oznacza zgodność z pojęciem „odpowiednich” środków, warunków i zasobów ani jak należy pojęcie to ilościowo określić na potrzeby obliczenia płatności, w związku z tym można było interpretować tę kwestię na wiele sposobów. W konsekwencji ekspert zewnętrzny analizujący na zlecenie Komisji kwestię osiągnięcia wartości docelowych był zmuszony opracować własne metody oceny tych kryteriów. Oznacza to, że kryteria te nie zostały określone z wyprzedzeniem w umowie w sprawie finansowania i nie uzgodniono ich zatem z krajem partnerskim.
  • Wskaźnik 2.1 określony w umowie „Wsparcie na rzecz reformy polityki w zakresie finansów publicznych” w Gruzji (umowa nr 8) ma następujące brzmienie: „Ministerstwo Finansów zorganizuje szereg publicznych dyskusji w sprawie zarządzania budżetem […]”. We wskaźniku nie określono ani liczby, ani charakteru tych spotkań.
29

Trybunał znalazł również przykłady dobrych praktyk, gdy Komisja podejmowała wysiłki, by zmierzyć postępy w przypadku wskaźników, dla których analiza była utrudniona. W przykładzie przedstawionym w ramce 4 Komisja odegrała wiodącą rolę w całej społeczności darczyńców w obszarze kształcenia.

Ramka 4

Pomiar jakości kształcenia – przykład dobrych praktyk

W ramach umowy „Wsparcie budżetowe na rzecz jordańskiego Ministerstwa Edukacji w zakresie radzenia sobie z kryzysem związanym z uchodźcami z Syrii” Komisja przewidziała wskaźnik „Zapewnienie syryjskim uczniom edukacji dobrej jakości w szkołach działających w systemie jednozmianowym i dwuzmianowym w społecznościach przyjmujących i obozach, zachowującej standardy porównywalne do jordańskich i upowszechnianej w kraju”.

Był to wskaźnik wyniku służący do pomiaru jakości edukacji zapewnianej syryjskim uczniom. Uzyskaną wartość wskaźnika ustalono za pomocą badania ankietowego przeprowadzonego w dobranej próbie szkół. W każdej ze szkół jakość kształcenia zmierzono, oceniając dziesięć zróżnicowanych czynników (takich jak hospitacje lekcji, zaangażowanie rodziców i uczniów w życie szkoły, zrównoważona reprezentacja chłopców i dziewcząt, uchodźców i Jordańczyków wśród uczniów) w oparciu o czterostopniową skalę. Otrzymaną punktację (punktację w zakresie jakości działań) wykorzystano następnie do przyznania poszczególnym szkołom ocen od A+ (ocena dobra) do C- (wymaga poprawy).

Był to pierwszy wskaźnik, który mierzył jakość edukacji w Jordanii. Został on następnie wykorzystany przez innych darczyńców i wprowadzony do wspólnych ram rezultatów w Jordanii.

Jeśli chodzi o weryfikację, czy zamierzone wartości wskaźników zostały osiągnięte, Trybunał wykrył jednak uchybienia (zob. ramka 10).

W przypadku 41% wskaźników postępu w realizacji nie określono poziomu wyjściowego lub był on nieprawidłowy

30

Do skutecznego pomiaru rezultatów konieczne są nie tylko szczegółowo i jednoznacznie określone wskaźniki. Postępy są mierzalne jedynie wówczas, gdy wartości docelowe można odnieść do sytuacji sprzed rozpoczęcia interwencji, tj. gdy można porównać je z poziomem wyjściowym. Spośród 85 wskaźników objętych analizą, w przypadku których konieczne było podanie poziomu wyjściowego (tj. wskaźników, które miały służyć do badania postępów5), Trybunał stwierdził występowanie problemów w 35 przypadkach. Problemy te dotyczyły: (i) braku niezbędnych wartości wyjściowych (15 przypadków); (ii) nieprawidłowych lub nieaktualnych wartości wyjściowych (20 przypadków).

31

Trybunał wykrył 15 wskaźników, dla których nie podano żadnych poziomów wyjściowych. Znalazły się one w czterech spośród 24 wybranych umów o świadczenie wsparcia budżetowego (umowy nr 6, 7, 8 i 17). Główną przyczyną braku poziomów wyjściowych było to, że kraje partnerskie nie monitorowały danej kwestii przed uruchomieniem danej umowy o świadczenie wsparcia budżetowego. Kontrolerzy Trybunału znaleźli jednak przykłady sytuacji, gdy w podobnych okolicznościach Komisja korzystała z pierwszej transzy zmiennej w ramach umowy o świadczenie wsparcia budżetowego, by zwrócić się do kraju partnerskiego o obliczenie wartości wyjściowych. W innych przypadkach Komisja wykonywała niezbędne prace (tj. badania ankietowe), aby obliczyć brakujące poziomy wyjściowe. Trybunał uznaje takie podejście za dobrą praktykę. W ramce 5 opisano przykład koniecznych prac zrealizowanych przez Komisję w celu dokładnej oceny postępów osiągniętych w odniesieniu do określonego wskaźnika w ramach kolejnych transz.

Ramka 5

Określanie wartości wyjściowych

Przykładem dobrej praktyki w zakresie określania wartości wyjściowych przez zastąpienie brakujących danych danymi z innych źródeł informacji jest wskaźnik 3 przewidziany w umowie o realizację reformy sektorowej, która miała na celu poprawę wyników sektora energetycznego w Rwandzie (umowa nr 19). Wskaźnik ten jest mierzony przez czas obowiązywania umowy za pomocą corocznego badania ankietowego. Niemniej w momencie sporządzania umowy w sprawie finansowania ankieta nie była dostępna, brak było więc wartości wyjściowej. Aby określić wartość wyjściową, delegatura UE przeprowadziła kompleksową analizę i zestawiła różne alternatywne źródła danych takie jak strategia z 2009 r. dotycząca energii z biomasy, ocena światowego sojuszu na rzecz czystych pieców kuchennych z 2012 r., a także sprawozdanie zawierające zintegrowany przegląd podaży i popytu na drewno opałowe. Na tej podstawie delegatura UE była w stanie zdefiniować odpowiedni poziom wyjściowy.

32

Co więcej, w przypadku 20 wskaźników poziomy wyjściowe były nieprawidłowe lub nieaktualne. W 11 z tych przypadków nowe dane istotne dla prawidłowego obliczenia poziomu wyjściowego stały się dostępne dopiero po podpisaniu umowy o świadczenie wsparcia budżetowego. Choć istnieje możliwość wprowadzenia zmian do odnośnej umowy w sprawie finansowania w celu uwzględnienia prawidłowego poziomu wyjściowego, w tych przypadkach Komisja nie podjęła takich działań. Zastosowanie nieprawidłowych lub nieaktualnych wartości wyjściowych sprawiło ponadto, że wartości docelowe dla niektórych wskaźników były niższe niż wartości wyjściowe. Przykłady takich sytuacji przedstawiono w ramce 6.

Ramka 6

Przykłady wskaźników z nieprawidłowymi wartościami wyjściowymi lub bez wartości wyjściowych

Brak wartości wyjściowych

W przypadku umowy „Zatrudnienie oraz kształcenie i szkolenie zawodowe” realizowanej w Gruzji (umowa nr 7) w momencie podpisania umowy w sprawie finansowania w 2014 r. nie określono wartości wyjściowych dla żadnego z pięciu wskaźników służących do pomiaru postępów. W konsekwencji poziom wyjściowy, względem którego miała nastąpić poprawa, wyniósł zero, co oznaczało, że wszelkie zgłoszone postępy można było uznać za wystarczające na drodze do osiągnięcia poziomu docelowego. Przykładowo, w umowie zawarto wartości docelowe dotyczące wzrostu odsetka nauczycieli uczestniczących w kształceniu wstępnym i ustawicznym. Brak było jednak danych na temat liczby nauczycieli już korzystających z kształcenia objętego pomiarem. Ponadto pojęcie kształcenia „wstępnego” i „ustawicznego” opracowano dopiero w 2016 r., wartości wyjściowe nie mogły być więc znane w momencie określania wartości docelowych. Wobec braku poziomów wyjściowych Komisja wzięła pod uwagę szersze zmiany w sektorze edukacji, a nie wartości wskaźników.

Wartości wyjściowych nie przedstawiono w podziale szczegółowym

W niektórych przypadkach podano wartości wyjściowe, ale nie były one wystarczająco szczegółowo rozbite, by można było zmierzyć osiągnięte postępy. Zgodnie z wartością docelową wskaźnika 1 określonego w umowie z Boliwią (umowa nr 9) określone instytucje miały przeszkolić wskazaną liczbę pracowników w 2016 r. Jeśli chodzi o wartości wyjściowe, podano informację na temat liczby kursów szkoleniowych zorganizowanych w 2013 r. Brakowało jednak informacji na temat liczby pracowników przeszkolonych przez konkretne instytucje, a więc zabrakło szczegółowego rozbicia danych. Jak wynika z dodatkowych dokumentów przedstawionych Trybunałowi, liczba pracowników przeszkolonych w 2013 r. w poszczególnych ośrodkach szkoleniowych przekraczała już dwie wartości docelowe wyznaczone na 2016 r., w jednym przypadku o 2%, w innym natomiast o 42%. W tej sytuacji brak odpowiednio szczegółowych wartości wyjściowych doprowadził do ustanowienia mało ambitnych poziomów docelowych.

Nieprawidłowe wartości wyjściowe

W przypadku „Programu wsparcia na rzecz realizacji planu sektora edukacji” realizowanego w Pakistanie (umowa nr 24) poziom wyjściowy dla wskaźnika 5 odnosił się do liczby uczniów i uczennic korzystających z obowiązującego systemu stypendialnego. Jako wartość docelową przyjęto natomiast określony odsetek kwalifikujących się do stypendium dziewcząt, które otrzymują je w terminie. Poziom wyjściowy nie był więc bezpośrednio powiązany z ustanowionym poziomem docelowym.

Ogólnie rzecz biorąc, wskaźniki wywołują zamierzony efekt zachęty, ale jest ich zbyt wiele

33

Podstawowym celem wsparcia budżetowego jest zapewnienie krajom partnerskim zachęt do realizowania uzgodnionych reform. W związku z tym wskaźniki wykorzystywane na potrzeby transz zmiennych powinny gwarantować, że kraj beneficjent podjął istotne działania. Określając odnośne poziomy docelowe, należy znaleźć właściwą równowagę między ambitnymi założeniami i trudnością w osiągnięciu celu6.

34

Trybunał stwierdził, że w przypadku większości transz zmiennych objętych przeglądem udało się zapewnić krajom partnerskim zachęty na rzecz wdrożenia określonych aspektów krajowych strategii rozwojowych. Niemniej w przypadku 11 z wybranych wskaźników poziomy docelowe można było osiągnąć w bardzo łatwy sposób. W tej liczbie znalazły się cztery wskaźniki, dla których ustanowiono bardzo niskie poziomy docelowe ze względu na zastosowanie nieprawidłowych poziomów wyjściowych (zob. pkt 3132). W ramce 7 przedstawiono przykłady niektórych wskaźników wywołujących jedynie niewielki efekt zachęty. Ponadto w przypadku kolejnych 12 dodatkowych wskaźników zawartych w trzech umowach podpisanych odpowiednio w Mołdawii (umowa nr 16), Boliwii (umowa nr 10) i Pakistanie (umowa nr 23) poziomy docelowe zostały osiągnięte w dużej mierze dzięki pomocy technicznej finansowanej przez UE lub innych darczyńców. W opinii kontrolerów Trybunału współodpowiedzialność krajów partnerskich za te wskaźniki jest niewielka i wywołują one niewielki efekt zachęty, ponieważ nie wymagają żadnego znaczącego zaangażowania ze strony tych krajów.

Ramka 7

Przykłady wskaźników, w przypadku których poziomy docelowe były łatwe do osiągnięcia

W umowie zawartej z Boliwią (umowa nr 9) wypłacenie części transzy zmiennej uzależniono od zorganizowania w 2015 r. dwóch posiedzeń plenarnych instytucji odpowiedzialnej za wdrożenie strategii walki z przemytem narkotyków. Regularne posiedzenia plenarne poświęcone monitorowaniu strategii stanowią część normalnej działalności tej instytucji, a nie aspekt wymagający zachęt w postaci wskaźnika warunkującego wypłatę transzy zmiennej.

Wartość docelowa dla wskaźnika 4 w ramach tej samej umowy zakłada sporządzenie sprawozdania wykazującego spełnienie przez kraj partnerski warunków wypłacenia wsparcia budżetowego przez UE. Sprawozdanie tego rodzaju stanowi jednak część standardowego procesu wypłacania środków w ramach wsparcia budżetowego i z tego względu nie powinno być uznawane za wskaźnik warunkujący wypłatę transzy zmiennej.

35

W wytycznych sugeruje się, by liczba wskaźników warunkujących wypłatę transzy zmiennej mieściła się w przedziale od trzech do dziesięciu. Zbyt duża liczba wskaźników osłabia efekt zachęty i utrudnia monitorowanie. W skontrolowanych umowach liczba wskaźników w przeliczeniu na jedną transzę wahała się od czterech do 347. Wskaźniki te podzielono jeszcze na wskaźniki cząstkowe i w wielu przypadkach przypisano do nich kilka wartości docelowych. Przykładowo, w umowie mającej na celu zapewnienie wsparcia na rzecz wdrożenia planu działania na rzecz liberalizacji reżimu wizowego w Mołdawii (umowa nr 15) zawarto 95 niezależnych od siebie wartości docelowych. Tak duża liczba wskaźników i wartości docelowych nie sprzyja ukierunkowaniu działań na zasadnicze cele polityczne zawarte w umowach o świadczenie wsparcia budżetowego. Choć na problemy związane ze znaczną liczbą wskaźników zwracano uwagę w wewnętrznych dokumentach Komisji, nie wpłynęło to na sposób formułowania umów (zob. ramka 8).

Ramka 8

Duża liczba wskaźników

W dokumentach przygotowawczych do umowy „Wsparcie na rzecz rolnictwa i rozwoju obszarów wiejskich” w Mołdawii (umowa nr 17) wspomniano, że „opracowanie niewielkiej liczby wyraźnie ukierunkowanych warunków płatności ma kluczowe znaczenie w Mołdawii, ponieważ wprowadzenie dużej liczby złożonych warunków może skutkować niepowodzeniem sektorowego wsparcia budżetowego”. Kwestię tę najwyraźniej pominięto podczas opracowywania umowy, skoro w umowie dotyczącej wypłacenia transzy zmiennej za 2017 r. zawarto 28 złożonych „warunków/kryteriów/działań warunkujących wypłacenie środków”, które zostały jeszcze podzielone na dalsze 39 kryteriów cząstkowych.

Proces weryfikacji przez Komisję, czy osiągnięto ustalone wartości wskaźnika, nie zawsze był najlepszej jakości i w rezultacie niektóre płatności nie były wystarczająco uzasadnione

36

We wnioskach o wypłatę środków składanych przez władze krajów będących odbiorcami pomocy zamieszcza się analizę postępów w sektorach objętych wsparciem zgodnie z umowami o świadczenie wsparcia budżetowego, a także informacje na temat spełnienia uzgodnionych warunków i osiągnięcia zamierzonych wartości wskaźników wykonania. Dokumentacja obejmuje zazwyczaj sprawozdanie z postępów w danej dziedzinie (sektorze), osobne sprawozdania na temat spełnienia poszczególnych warunków oraz noty dotyczące każdego wskaźnika wraz z dokumentacją poświadczającą (np. pismami z urzędu statystycznego, sprawozdaniami z badań ankietowych itd.). Proces wypłacania środków w ramach wsparcia budżetowego przedstawiono na rys. 3.

37

Wnioski składane przez kraje partnerskie sporządza się w oparciu o dane z krajowych systemów monitorowania i oceny, które stanowią zatem podstawowe źródło informacji przy podejmowaniu decyzji dotyczących wypłacania środków w ramach transz zmiennych. Zdolności w zakresie gromadzenia, przechowywania, analizowania i wykorzystywania danych oraz powiązane systemy są jednak różne w poszczególnych krajach. W związku z tym przed rozpoczęciem działań w zakresie wsparcia budżetowego Komisja musi ocenić systemy stosowane na potrzeby generowania wskaźników wykonania, które to wskaźniki zostaną następnie wykorzystane przy obliczaniu płatności w ramach transz zmiennych. W szczególności delegatury UE muszą stwierdzić, czy uchybienia w zakresie systemów statystycznych, dostępności danych i analizy strategicznej podważają w istotny sposób zasadność złożonych przez dany kraj wniosków o wypłatę środków.

38

W odniesieniu do umów objętych przeglądem Trybunał sprawdził, czy wybierając wskaźniki wykonania na potrzeby transz zmiennych, Komisja rzetelnie oceniła wiarygodność danych na temat wyników. Przeanalizował również, czy Komisja przeprowadziła gruntowne badanie wniosków o wypłatę transz zmiennych i czy prawidłowo obliczyła kwoty, które miały zostać wypłacone.

Komisja nie formułowała wniosków co do zdolności poszczególnych krajów do wygenerowania danych na potrzeby wskaźników

39

Delegatury UE są proszone o przedstawienie przeglądu systemów monitorowania i oceny stosowanych w danym kraju partnerskim (ogólnie na szczeblu krajowym i w odniesieniu do konkretnego sektora objętego umową SRPC). Przegląd ma zawierać ocenę, czy polityka publiczna danego państwa jest zgodna z celami UE oraz czy potencjał instytucjonalny można uznać za wystarczający do realizacji tej polityki. Ponadto w wytycznych nałożono wymóg, by przed sporządzeniem umowy o świadczenie wsparcia budżetowego przeprowadzono analizę wiarygodności i dostępności danych oraz oceniono uchybienia w systemach statystycznych.

40

Trybunał przeanalizował oceny przeprowadzone przez Komisję, opierając się przy tym na kryteriach ustanowionych przez unijny urząd statystyczny (Eurostat). Eurostat opracował narzędzie o nazwie Snapshot, które ma pomóc delegaturom UE w rozpoznawaniu silnych i słabych stron krajowych systemów statystycznych w krajach rozwijających się. Trybunał stwierdził, że w wytycznych Komisji dotyczących wsparcia budżetowego uwzględniono kluczowe wymogi określone w ramach tego narzędzia. Snapshot jest jednak instrumentem bardziej kompleksowym i zawiera szczegółowe wyjaśnienia na temat sposobu mierzenia poszczególnych obszarów8, które są istotne przy ocenie systemów statystycznych. Znajomość tego narzędzia wśród pracowników delegatur jest ogólnie niewielka.

41

Jak wynika z dokonanego przez Trybunał przeglądu przeprowadzonych przez Komisję ewaluacji systemów monitorowania i oceny, wprawdzie Komisja ogólnie opisuje i poddaje ocenie elementy wymienione w wytycznych, lecz te elementy są rozsiane w szeregu dokumentów. Choć w większości umów (18 z ogólnej liczby 24) wspomniano pewne uchybienia związane z określonymi sektorami, jedynie w pięciu umowach zawartych w Jordanii Komisja sformułowała jednoznaczne wnioski co do wiarygodności danych na temat wyników koniecznych do obliczenia wskaźników warunkujących wypłatę transz zmiennych9. Sformułowanie takich wniosków ma istotne znaczenie dla wyboru wskaźników, monitorowania i analizy wniosków o wypłatę środków.

Komisja weryfikowała wiarygodność danych leżących u podstaw wniosków o wypłatę środków, ale nie we wszystkich przypadkach analiza ta była gruntowna

42

Przed wypłaceniem środków w ramach transzy zmiennej delegatury UE mają obowiązek przeanalizować wnioski o wypłatę środków złożone przez kraje partnerskie (w tym wartości odpowiednich wskaźników wykonania). Jak ustalił Trybunał, stosowano zróżnicowane procedury weryfikacyjne, przy czym część z nich nie zapewniała koniecznego poziomu pewności, który uzasadniałby dokonanie odnośnej płatności.

43

Ogólnie rzecz biorąc, Komisja stosowała trzy różne rodzaje procedur weryfikacyjnych: (i) przegląd dokumentacji i ponowne przeprowadzenie obliczeń wartości wskaźników z wykorzystaniem danych przekazanych przez kraje partnerskie; (ii) zastosowanie tej metody z uzupełnieniem jej wizytami w terenie w celu sprawdzenia wiarygodności przekazanych danych; (iii) zlecenie ekspertom zewnętrznym obliczeń wartości wskaźników wykonania lub weryfikacji danych przekazanych przez kraj partnerski.

44

W przypadku 14 spośród 24 skontrolowanych umów urzędnicy delegatur UE przeprowadzili wizyty w terenie w celu uzupełnienia analiz i sprawdzenia części przekazanych danych (zob. ramka 9). Ponadto w przypadku 16 umów zatrudniono – niekiedy w uzupełnieniu do wizyt pracowników delegatur w terenie – ekspertów zewnętrznych do przeanalizowania spełnienia warunków wypłacenia transz zmiennych. W krajach objętych polityką sąsiedztwa korzystanie z usług ekspertów było regularną praktyką, natomiast w pozostałych skontrolowanych państwach delegatury zwróciły się do ekspertów w jedynie w przypadku pięciu z 13 umów.

45

W wytycznych dotyczących wsparcia budżetowego zalecono, by zwracać się do ekspertów o pomoc w procesie weryfikacji w przypadkach, gdy istnieją poważne wątpliwości co do jakości dostarczonych danych. Niemniej wobec braku jednoznacznych wniosków co do zdolności krajów partnerskich do generowania takich danych (zob. pkt 3941), trudno zdecydować, czy taka pomoc ekspercka jest rzeczywiście potrzebna. W przypadku skontrolowanych umów średni koszt powierzonego ekspertom zadania weryfikacji wyniósł w przybliżeniu 110 000 euro.

Ramka 9

Weryfikacja przez Komisję wniosków o wypłatę środków

Aby ocenić wnioski o wypłatę środków w ramach umowy o realizację reformy sektorowej mającej na celu zwiększenie wydajności sektora rolnictwa w Rwandzie (umowa nr 18), delegatura UE przeprowadziła kompleksową analizę informacji przedłożonych przez rząd rwandyjski i uzupełniła ją wizytami w terenie. Zwróciła się również o dodatkowe wyjaśnienia do władz krajowych. W szczególności w przypadku wskaźnika 5a wartość docelowa dla pierwszego roku zakładała wykorzystanie 80 000 ha gruntów na systemy rolno-leśne na określonych obszarach. Przedstawiciele delegatury przeprowadzili wizytę w terenie, w wyniku której stwierdzono, że przedłożone informacje były nieprawidłowe, ponieważ działalność na tym obszarze nie ograniczała się do systemu rolno-leśnego. W konsekwencji Komisja wstrzymała płatność związaną z tym wskaźnikiem w ramach transzy.

46

Trybunał stwierdził, że w przypadku sześciu10 z 24 umów ujętych w próbie Komisja nie przeprowadziła w skuteczny sposób dodatkowej weryfikacji danych stanowiących podstawę do wypłacenia transz zmiennych. Wynikało to w dużej mierze z faktu, że delegatury UE polegały w pełni na poprawności danych na temat wyników przedstawionych przez kraje partnerskie lub na weryfikacji przeprowadzonej przez ekspertów zewnętrznych w imieniu Komisji, nie przedsięwzięto natomiast żadnego dodatkowego sprawdzania danych. W takich przypadkach wykrycie przez Komisję niewiarygodnych danych zawartych we wnioskach o wypłatę środków jest utrudnione, co zwiększa ryzyko nieuzasadnionych płatności w ramach transz zmiennych. W ramce 10 przedstawiono przykład niedociągnięć w przeglądzie zewnętrznym, które nie zostały wykryte przez Komisję.

Ramka 10

Przykłady niedociągnięć wykrytych w pracach ekspertów zewnętrznych

W przypadku umowy nr 2 mającej na celu wsparcie Ministerstwa Edukacji w Jordanii w radzeniu sobie z syryjskim kryzysem uchodźczym Komisja zatrudniła eksperta do oceny danych zgłoszonych przez Ministerstwo Edukacji w odniesieniu do określonych wskaźników warunkujących wypłatę transzy zmiennej. Ekspert potwierdził dane przekazane przez Ministerstwo, przeprowadzając wizyty w próbie 30 szkół. Na podstawie sprawozdania przedłożonego przez eksperta Komisja wypłaciła środki w ramach transzy zmiennej.

Trybunał dokonał przeglądu pracy eksperta i przeprowadził wizyty w szkołach objętych próbą. W toku tych czynności rozpoznano następujące problemy:

  1. Dobór szkół do próby nie był losowy, tylko został przeprowadzony w oparciu o zalecenia zewnętrznego zespołu doradczego przy UNESCO, a następnie zatwierdzony przez Ministerstwo Edukacji. Wiąże się z tym ryzyko, że próba nie była reprezentatywna.
  2. Choć ekspert faktycznie przeprowadził wizyty w 30 szkołach ujętych w próbie, dane porównano jedynie w odniesieniu do 17 spośród tych szkół, ponieważ Ministerstwo nie posiadało informacji na temat pozostałych. W związku z tym sformułowane przez eksperta zewnętrznego wnioski na temat wiarygodności systemu informatycznego Ministerstwa były oparte na niewystarczających dowodach.
  3. Kontrole w terenie dotyczące pracowników zatrudnionych w szkołach odnosiły się wyłącznie do nauczycieli, a tymczasem wartość docelowa dla wskaźnika 1 obejmowała również pracowników niedydaktycznych, stąd wnioski dotyczące tego wskaźnika były niekompletne.
  4. Ekspert orzekł, że dane uzyskane w terenie potwierdzają dane przedstawione przez Ministerstwo. W przypadku wskaźników 1 (liczba pracowników) i 2 (liczba uczniów) wniosek ten sformułowano, porównując łączne wyniki uzyskane w próbie. Wyniki poszczególnych szkół charakteryzują się jednak dużymi rozbieżnościami (w górę i w dół), które przestały być widoczne po obliczeniu łącznych rezultatów.

W przypadku niektórych transz zmiennych dane na temat wyników przedstawione przez kraje partnerskie nie uzasadniały wykonanych płatności

47

W przypadku pięciu z ośmiu krajów wynik przeprowadzonej przez Trybunał oceny, jeśli chodzi o osiągnięcie wymaganych wartości wskaźników warunkujących wypłatę transzy zmiennej, był odmienny od wyników przyjętych przez Komisję. Różnica ta wyniosła 13,3 mln euro z łącznej skontrolowanej kwoty 234 mln euro płatności w ramach transz zmiennych, co w przypadku jednego kraju (Pakistanu) oznaczało 19% różnicy w płatnościach transz zmiennych. Ponadto Trybunał stwierdził również, że Komisja wypłaciła 3,4 mln euro na rzecz dwóch krajów w oparciu o wskaźniki powiązane z nieprawidłowo określonymi poziomami wyjściowymi. Choć zgodnie z postanowieniami umownymi pieniądze te należało wypłacić, ponieważ wartość docelowa została osiągnięta, faktycznie nie poczyniono żadnych postępów w obszarze mierzonym za pomocą wskaźnika. W tabeli 1 podsumowano wspomniane kwoty dla poszczególnych krajów, w których przeprowadzono wizyty.

Tabela 1 – Rozbieżności względem ocen przeprowadzonych przez Komisję

Państwo Transza zmienna poddana przeglądowi
(w EUR)
Różnica względem oceny Trybunału
(w EUR)
Nr umowy i wskaźnika Przyczyna wystąpienia rozbieżności
(w podziale na wskaźniki)
Kwoty wypłacone bez żadnych faktycznych postępów
(w EUR)
Boliwia 32 800 000 0 0
Etiopia 29 520 000 0 2 000 000
umowa nr 14, wskaźnik 7
Gruzja 19 400 000 1 000 000 umowa nr 6,
wskaźniki 1.2 oraz 1.7
Wskaźnik 1.2 osiągnięto 2 miesiące po terminie.
W przypadku wskaźnika 1.7 nie osiągnięto wartości docelowej.
0
Jordania 45 750 000 6 000 000 umowa nr 1,
wskaźnik 5
Osiągnięto 2 lata po terminie. 0
Mołdawia 26 345 111 1 000 000 umowa nr 16,
wskaźniki 2.1 oraz 2.2
Wskaźnik 2.1 osiągnięto miesiąc po terminie.
Wskaźnik 2.2 osiągnięto 3 miesiące po terminie.
0
Pakistan 25 665 625 4 968 750 umowa nr 23,
wskaźniki 5, 6 i 8
umowa nr 24,
wskaźniki 4, 6.2 i 6.3
Wskaźniki 5,6 i 8 – nie osiągnięto poziomów docelowych.
Wskaźniki 4 i 6.3 – nieprawidłowe dowody.
Wskaźnik 6.2 – nie osiągnięto poziomów docelowych.
0
Rwanda 27 667 500 332 500 umowa nr 20,
wskaźnik 2
Osiągnięto rok po terminie. 1 437 500
umowa nr 19, wskaźnik 5; umowa nr 20, wskaźnik 4
Wietnam 27 000 000 0 0
OGÓŁEM 234 148 236 13 301 250 3 437 500

Źródło: Europejski Trybunał Obrachunkowy.

48

Główne problemy wykryte przez Trybunał dotyczyły następujących kwestii: (i) poziomy docelowe osiągnięto z opóźnieniem, po upłynięciu wyznaczonych terminów; (ii) pomiar rezultatów był prowadzony w oparciu o nieprawidłowo obliczone poziomy wyjściowe; (iii) dowody przedstawione na potwierdzenie osiągnięcia wymaganych wartości wskaźników były nieprawidłowe lub niewystarczające; (iv) w ogóle nie udało się osiągnąć poziomów docelowych. Na rys. 6 przedstawiono rodzaje i rozmiary wykrytych rozbieżności względem ocen Komisji.

Rys. 6

Rodzaje rozbieżności

Źródło: Europejski Trybunał Obrachunkowy.

49

ramce 11 omówiono jeden z przypadków, gdy Trybunał uznał, że informacje poświadczające przedstawione przez kraj partnerski były nieprawidłowe.

Ramka 11

Dowody zgromadzone na podstawie badania niereprezentatywnej próby

Poziom docelowy dla wskaźnika 6.3 w umowie dotyczącej sektora edukacji w Pakistanie (umowa nr 24) zakładał, że wskaźnik frekwencji szkolnej wśród uczniów otrzymujących bony powinien wynieść co najmniej 80%. Zgodnie z informacjami poświadczającymi przedstawionymi przez kraj partnerski wskaźnik frekwencji przekroczył zakładaną wartość docelową (wyniósł 87%), Komisja uznała więc, że poziom docelowy został osiągnięty. Przedstawione informacje miały obejmować – zgodnie ze sprawozdaniem dotyczącym spełnienia wymogów pomocy technicznej – frekwencję wśród wszystkich tych uczniów przez cały rok. Analiza przeprowadzona przez Trybunał wykazała jednak, że przy obliczaniu wskaźnika frekwencji wśród wszystkich uczniów otrzymujących bony organy krajowe wzięły pod uwagę jedynie jedną czwartą z nich. Ponadto próbę dobrano na początku roku szkolnego, kiedy frekwencja jest największa. Trybunał stwierdził zatem, że informacje poświadczające były niewystarczające ze względu na niereprezentatywny charakter próby.

W powyższym przypadku Komisja uznała, że poziomy docelowe zostały osiągnięte, i zrealizowała płatność w całości.

50

W czterech umowach Trybunał wykrył pięć wskaźników11, w przypadku których poziomy docelowe osiągnięto po upływie terminu określonego w umowie w sprawie finansowania. Ponadto w przypadku pięciu kolejnych wskaźników12 Trybunał uznał, że kraje partnerskie nie osiągnęły poziomów docelowych, choć Komisja uznała je za osiągnięte. W ramce 12 przedstawiono przykłady obu takich sytuacji.

Ramka 12

Poziomy docelowe osiągnięto z opóźnieniem, częściowo, lub nie osiągnięto ich wcale

Wartość docelową osiągnięto po upływie terminu w przypadku wskaźnika 5 w umowie dotyczącej sektora edukacji w Jordanii (umowa nr 1). Wartością docelową dla tego wskaźnika było zbudowanie sześciu nowych szkół do 2015 r. Szkoły zostały ukończone dopiero w 2017 r., a transzę zmienną wypłacono w grudniu 2017 r. To znaczne opóźnienie było spowodowane przedłużającymi się postępowaniami o udzielenie zamówienia publicznego, które poskutkowały spóźnioną realizacją robót budowlanych przez organy krajowe.

Aby uwzględnić te opóźnienia, Komisja przedłużyła okres realizacji umowy do grudnia 2017 r., ale nie zmieniła obowiązującego terminu budowy szkół (2015 r.).

Wartość docelowa dla wskaźnika 6 w umowie dotyczącej sektora edukacji w Pakistanie (umowa nr 23) obejmowała dwa działania – opracowanie programu nauczania języka angielskiego i zatwierdzenie podręczników dla określonych poziomów nauczania. Trybunał ustalił, że jedynie połowa podręczników została zatwierdzona w momencie złożenia wniosku o wypłatę środków, i w związku z tym stwierdził, że drugiego elementu wartości docelowej nie można było uznać za osiągnięty.

Wartość docelowa dla wskaźnika 1.7 w umowie dotyczącej sektora rolnictwa w Gruzji (umowa nr 6) zakładała przyjęcie państwowego programu w zakresie mechanizmów certyfikacji produkcji ekologicznej. Rząd uznał, że wartość docelowa dla tego wskaźnika została osiągnięta wraz z przyjęciem państwowego programu dotyczącego rekultywacji plantacji herbaty. Niemniej zadeklarowanym celem tego programu jest wspieranie skutecznego prowadzenia plantacji herbaty w Gruzji, zwiększenie produkcji herbaty, w tym herbaty ekologicznej, a także zwiększenie autonomii i zdolności eksportowych, nie wspomina się natomiast o samych mechanizmach certyfikacji produkcji ekologicznej. Trybunał uznaje, że ta wartość docelowa nie została osiągnięta, ponieważ wspomniany program nie jest w szczególności ukierunkowany na produkty ekologiczne. Podobnego zdania był również ekspert zewnętrzny.

We wszystkich opisanych wyżej przypadkach Komisja zrealizowała płatność w całości.

51

Trybunał wykrył trzy przypadki, gdy Komisja wypłaciła środki zgodnie z postanowieniami umów w sprawie finansowania, ponieważ krajom partnerskim udało się osiągnąć założone poziomy docelowe, niemniej ze względu na nieprawidłowo określone wartości wyjściowe lub docelowe, w przedmiotowych sektorach nie poczyniono żadnych faktycznych postępów. Więcej szczegółowych informacji na temat niektórych z tych przypadków przedstawiono w ramce 13.

Ramka 13

Wartości docelowe wyznaczone w oparciu o nieprawidłowe wartości wyjściowe – nie dokonano faktycznych postępów

Wskaźnik 7 w umowie dotyczącej sektora transportu w Etiopii (umowa nr 14) dotyczy odsetka przeciążonych ciężarówek na drogach. Jako wartość docelową ustalono zmniejszenie tego odsetka do 9% z wartości wyjściowej wynoszącej 11%. Wynik na koniec badanego okresu wyniósł 6%, a zatem osiągnięto wartość docelową i wypłacono powiązaną z nią kwotę zgodnie z postanowieniami umowy w sprawie finansowania. Niemniej jak wynika z informacji przekazanych przez kraj partnerski we wniosku o wypłatę środków, faktyczna wartość wyjściowa wynosiła 6%. W rzeczywistości nie poczyniono żadnych postępów, jeśli chodzi o faktyczną liczbę przeciążonych ciężarówek.

Innym przypadkiem określenia nieprawidłowych wartości wyjściowych, co doprowadziło do wypłaty środków, choć nie poczyniono faktycznych postępów, jest wskaźnik 5 w umowie dotyczącej sektora energii w Rwandzie (umowa nr 19). Wskaźnik ten mierzy udział energii elektrycznej wytworzonej z odnawialnych źródeł energii w ogólnym koszyku energetycznym. Wartość wyjściowa wykorzystana na potrzeby umowy wyniosła 292 GWh energii wytworzonej w 2015 r., ale była ona nieprawidłowa. Zgodnie z danymi przekazanymi przez organy krajowe powinna ona wynieść 368 GWh. W odniesieniu do skontrolowanej transzy zmiennej ustanowiono wartość docelową zakładającą wygenerowanie dodatkowo względem poziomu wyjściowego 14,5 GWh energii z odnawialnych źródeł. Wynik osiągnięty dla tego wskaźnika w okresie objętym kontrolą wyniósł 361,5 GWh, co przełożyło się na wypłacenie odnośnej kwoty, choć faktycznie udział energii elektrycznej wytworzonej z odnawialnych źródeł energii się zmniejszył.

52

Obok rozbieżności, których kwoty podano w tabeli 1, Trybunał nie mógł ponadto potwierdzić poprawności dwóch płatności w ramach transz zmiennych ze względu na brak odpowiednich dowodów poświadczających wartości zgłoszone dla pięciu wskaźników13 (zob. przykłady w ramce 14). Wskaźniki te były powiązane z wypłaconymi środkami na kwotę 3,77 mln euro.

Ramka 14

Brak wystarczających dowodów poświadczających

Wskaźnik 1.2 w umowie nr 5 dotyczącej wsparcia zarządzania finansami publicznymi w Jordanii dotyczył braków szkoleniowych wśród pracowników jednostek kontroli wewnętrznej w różnych ministerstwach i agencjach krajowych. Wartość docelowa zakładała przeszkolenie tych pracowników, których nie uczestniczyli w szkoleniach w poprzednim roku (nie wyznaczono celu ilościowego). Ekspert zewnętrzny zatrudniony przez Komisję stwierdził, że ponad 85% pracowników ze wszystkich takich jednostek wzięło udział w jednym z oferowanych dodatkowych kursów szkoleniowych i że w konsekwencji zamierzona wartość dla tego wskaźnika została osiągnięta. Ponieważ w sprawozdaniu eksperta nie wskazano, w jaki sposób wartość 85% została obliczona, Trybunał nie był w stanie powtórzyć tych obliczeń ani potwierdzić, że dzięki oferowanym szkoleniom wszystkie braki zostały uzupełnione. Brak było informacji lub danych na temat tego, co zostało uwzględnione w odsetku 85%.

Wskaźnik 3 w umowie dotyczącej programu rozwoju społeczności lokalnych w Pakistanie (umowa nr 22) miał mierzyć udział środków budżetowych przyznanych na projekty rozwoju opartego na społecznościach lokalnych w ogólnych szacunkach kosztów powiązanych ze strategiami rozwoju dystryktów. Tymczasem szacunków kosztów na szczeblu dystryktów nie można było powiązać ze strategiami rozwoju, które zostały przekazane jako dokument poświadczający. Podobnie w sprawozdaniu sporządzonym przez eksperta zatrudnionego przez Komisję do oceny tego wskaźnika nie udało się pogodzić szacunków kosztów na szczeblu dystryktów i powiązanych strategii rozwojowych. Z tego względu Trybunał nie jest w stanie potwierdzić zgłoszonego wyniku.

Niewystarczająco udokumentowane płatności w Mołdawii

53

Wprawdzie kwestia ta nie jest bezpośrednio związana z weryfikacją wskaźników wykonania, niemniej Trybunał stwierdził, że Komisja wypłaciła trzy transze zmienne na rzecz Mołdawii, na łączną kwotę 26,3 mln euro, choć nie udokumentowano w wystarczającym stopniu dowodów uzasadniających te płatności (zob. ramka 15).

Ramka 15

Udokumentowanie płatności na rzecz Mołdawii

W umowach w sprawie finansowania w zakresie wsparcia budżetowego przewidziano prawo Komisji do zawieszenia umowy w przypadku naruszenia przez kraj partnerski obowiązku dotyczącego poszanowania praw człowieka, zasad demokratycznych i praworządności oraz w poważnych przypadkach korupcji (art. 236 ust. 4 rozporządzenia finansowego mającego zastosowanie do budżetu ogólnego Unii, lipiec 2018 r.).

Ze względu na obawy dotyczące stanu demokracji w tym kraju w lipcu i październiku 2017 r. Komisja zdecydowała o zawieszeniu płatności kilku transz zmiennych i stwierdziła, że „harmonogram płatności zostanie odpowiednio dostosowany, przy uwzględnieniu poszanowania skutecznych mechanizmów demokratycznych, praworządności i praw człowieka w Mołdawii”. Zasadniczą przyczyną podjęcia tej decyzji było rychłe przyjęcie nowej ordynacji wyborczej w Mołdawii, niezgodnej z zaleceniami Komisji Weneckiej, będącej organem doradczym Rady Europy w kwestiach dotyczących prawa konstytucyjnego.

Tymczasem 11 grudnia 2017 r. wydano zatwierdzenie płatności, przy czym nie zostało ono poparte oceną wskazującą na poprawę funkcjonowania mechanizmów demokratycznych i sytuacji w zakresie praw człowieka w Mołdawii, które to kwestie stanowiły pierwotną przyczynę zawieszenia tej płatności.

Wnioski i zalecenia

54

Trybunał zbadał, czy Komisja wykorzystywała adekwatne i wiarygodne dane dotyczące wyników przy wypłacaniu transz zmiennych w ramach wsparcia budżetowego. Stwierdził, że w przypadku jednej trzeciej wskaźników wykonania objętych analizą przyjęta koncepcja niekorzystnie wpłynęła na ich adekwatność, bowiem nie pozwalały one na obiektywny pomiar uzyskanych rezultatów. Ponadto przeprowadzona przez Komisję ocena, czy osiągnięto założone wartości wskaźników warunkujących wypłatę transz zmiennych, nie zawsze była wiarygodna, co prowadziło w niektórych przypadkach do niedostatecznie uzasadnionych płatności.

55

Trybunał stwierdził, że wskaźniki wykonania warunkujące wypłatę transz zmiennych odpowiednio dostosowano do sektorowych strategii rozwoju w krajach partnerskich. Większość z nich dotyczyła jednak krótkoterminowych działań, a nie długofalowych rezultatów, w tym postępów na drodze do realizacji celów zrównoważonego rozwoju. Jedynie 13% z łącznej liczby 248 wskaźników objętych kontrolą Trybunału służyło do pomiaru wyników lub oddziaływania w sektorach objętym wsparciem (zob. pkt 2225). Zastosowanie wskaźników wyniku pozwoliłoby Komisji lepiej zmierzyć długofalowe rezultaty, w tym postępy na drodze do realizacji celów zrównoważonego rozwoju.

Zalecenie 1 – Częstsze korzystanie ze wskaźników wyniku na potrzeby transz zmiennych

Komisja powinna zwiększyć odsetek transz zmiennych wypłacanych po osiągnięciu określonych wskaźników wyniku.

Termin realizacji: koniec 2021 r.

56

W przypadku ponad jednej trzeciej zastosowanych wskaźników definicje były niejasne lub podano nieprawidłowe poziomy wyjściowe bądź nie podano żadnych takich poziomów. W rezultacie trudno było jednoznacznie rozstrzygnąć, czy wartości docelowe zostały osiągnięte, co sprawiało, że proces analizowania wniosków o wypłatę środków był bardziej złożony i mniej obiektywny (zob. pkt 2632).

Zalecenie 2 – Udoskonalenie koncepcji wskaźników wykonania

Komisja powinna usprawnić działanie mechanizmów kontroli jakości w celu dopilnowania, by wskaźniki wykonania warunkujące wypłatę transz zmiennych pozwalały na obiektywny pomiar wyników osiągniętych przez kraje partnerskie. Szczególną uwagę należy zwrócić na:

  1. wykorzystanie wskaźników wykonania, które są szczegółowe i nie dopuszczają rozbieżnych interpretacji;
  2. stosowanie wartości wyjściowych i docelowych.

Termin realizacji: koniec 2021 r.

57

Istotnym celem transz zmiennych wypłacanych w ramach wsparcia budżetowego jest wytworzenie zachęt dla krajów partnerskich na rzecz realizowania programów reform. Na potrzeby większości transz zmiennych poddanych przeglądowi wprowadzono wskaźniki, w przypadku których przy określaniu wartości docelowych należycie wyważono poziom ambicji i dostępne możliwości. Trybunał uznaje, że wskaźniki te wywołały odpowiedni efekt zachęty. Niewielka liczba wykrytych przez Trybunał wyjątków w tym względzie dotyczyła wskaźników z poziomami docelowymi, które łatwo było osiągnąć – w wielu przypadkach ze względu na zastosowanie nieprawidłowych wartości wyjściowych – lub które zostały osiągnięte dzięki działaniom zrealizowanym przez innych darczyńców lub ekspertów zewnętrznych wynagradzanych ze środków UE (zob. pkt 3334).

Zalecenie 3 – Zapewnienie, by transze zmienne wywoływały odpowiedni efekt zachęty

Komisja powinna:

  1. aktualizować informacje dotyczące poziomów wyjściowych przed podpisaniem umowy lub w razie konieczności korygować wartości wyjściowe w trakcie wdrażania umowy przez wprowadzenie poprawek do umowy o świadczenie wsparcia budżetowego;
  2. unikać sytuacji, w których kraj partnerski osiąga założone wartości docelowe wyłącznie dzięki pomocy technicznej finansowanej ze środków UE.

Termin realizacji: koniec 2021 r.

58

W wielu przypadkach liczba wskaźników wykorzystywanych na potrzeby poszczególnych transz zmiennych była zbyt wysoka i przekraczała liczbę zalecaną w wytycznych Komisji. Kwestia ta dodatkowo komplikowała proces wypłacania środków (zob. pkt 35).

Zalecenie 4 – Uproszczenie procesu wypłacania transz zmiennych

Komisja powinna powstrzymać się od stosowania wskaźników cząstkowych, tak aby faktyczna liczba wskaźników nie przekraczała maksimum wskazanego w wytycznych.

Termin realizacji: koniec 2021 r.

59

We wnioskach o wypłatę transz zmiennych zawarte są dane na temat wyników, które wskazują, w jakim zakresie spełniono uzgodnione warunki i osiągnięto założone wartości wskaźników wykonania. Ponieważ wnioski te są opracowywane przez kraje partnerskie, wiarygodność danych leżących u podstaw wniosków zależy od zdolności tych krajów do wygenerowania takich danych. Trybunał ustalił, że ogólnie rzecz biorąc, Komisja przeprowadzała oceny zdolności krajów partnerskich w tym względzie przez analizę głównych elementów systemów monitorowania i oceny stosowanych w tych krajach, tak jak przewidziano w wytycznych Komisji dotyczących wsparcia budżetowego. Stwierdził jednak, że jedynie w przypadku pięciu z 24 wybranych umów Komisja sformułowała wnioski co do wiarygodności danych na temat wyników koniecznych do obliczenia wskaźników warunkujących wypłatę transzy zmiennej (zob. pkt 3641). Sformułowanie takich wniosków ma istotne znaczenie dla wyboru wskaźników, monitorowania i analizy wniosków o wypłatę środków.

Zalecenie 5 – Udoskonalenie oceny zdolności poszczególnych krajów do generowania danych na temat wyników wykorzystywanych na potrzeby transz zmiennych

Przy opracowywaniu operacji wsparcia budżetowego Komisja powinna oceniać wiarygodność danych na temat wyników, które są następnie wykorzystywane na potrzeby wypłacania transz zmiennych. W wyniku tej oceny należy sformułować jednoznaczny wniosek co do wystarczającej wiarygodności systemów wykorzystywanych do generowania tych danych, przy czym ocena może opierać się na wcześniejszych ocenach zrealizowanych przez inne uznane organy.

Termin realizacji: koniec 2021 r.

60

Trybunał stwierdził, że przy analizowaniu wniosków o wypłatę środków delegatury stosowały zróżnicowane procedury. W niektórych przypadkach pracownicy delegatur UE przeprowadzali wizyty w terenie w celu sprawdzenia danych przedstawionych przez kraje partnerskie, podczas gdy w innych w pełni polegali na tych danych lub na przeglądach zrealizowanych przez ekspertów zewnętrznych w imieniu Komisji i nie podejmowali dodatkowych czynności weryfikacyjnych. Takie podejście nie zapewnia wystarczającego poziomu pewności, który uzasadniałby realizację płatności w ramach transz zmiennych (zob. pkt 4246).

Zalecenie 6 – Usprawnienie weryfikacji danych na temat wyników wykorzystywanych na potrzeby wypłacania środków w ramach transz zmiennych

Komisja powinna:

  1. dokonywać przeglądu dowodów poświadczających dane na temat wyników przedstawianych we wnioskach o wypłatę środków przez kraje partnerskie, chyba że wcześniej jednoznacznie stwierdziła, że dane te są wiarygodne;
  2. w przypadku korzystania z przeglądów realizowanych przez ekspertów zewnętrznych w specyfikacjach tych przeglądów nałożyć wymóg weryfikowania wiarygodności kluczowych danych na temat wyników przekazywanych przez kraje partnerskie. Przed wypłaceniem środków w ramach transzy zmiennej należy upewnić się, że eksperci spełnili ten wymóg.

Termin realizacji: koniec 2021 r.

61

Kontrolerzy Trybunału ponownie przeprowadzili zrealizowane przez Komisję oceny, czy osiągnięto założone wartości wskaźników, oraz ponownie obliczyli płatności w ramach transz zmiennych. Stwierdzono rozbieżności względem kwot wypłaconych przez Komisję. Na podstawie dostępnych informacji na temat wyników Trybunał szacuje, że łącznie rozbieżności dotyczyły 16,7 mln euro z ogólnej kwoty 234 mln euro płatności w ramach transz zmiennych poddanych przeglądowi. Z tej kwoty płatności na 13,3 mln euro nie były wystarczająco uzasadnione lub nie były zgodne z postanowieniami umów, natomiast kwotę 3,4 mln euro wypłacono pomimo nieosiągnięcia faktycznych postępów. Dodatkowo 26,3 mln euro w ramach trzech transz zmiennych wypłacono na rzecz Mołdawii, choć nie udokumentowano w wystarczającym stopniu dowodów uzasadniających te płatności (zob. pkt 4753).

Niniejsze sprawozdanie zostało przyjęte przez Izbę III, której przewodniczy Bettina JAKOBSEN, członkini Trybunału Obrachunkowego, na posiedzeniu w Luksemburgu w dniu 12 listopada 2019 r.

W imieniu Europejskiego Trybunału Obrachunkowego

Klaus-Heiner Lehne
Prezes

Załączniki

Załącznik I – Udział wsparcia budżetowego w łącznej kwocie zobowiązań w ramach dwustronnej oficjalnej pomocy rozwojowej

Kraj 2014 2015 2016 2017 Średnia za lata 2014–2017
Austria 0,69% 1,01% 0,10% 1,24% 0,76%
Belgia 2,50% 1,85% 1,41% 0,15% 1,48%
Czechy 1,52% 0,00% 0,00% 0,44% 0,49%
Dania 3,83% 0,00% 0,73% 0,91% 1,36%
Finlandia 3,75% 3,89% 0,00% 2,98% 2,65%
Francja 2,86% 1,86% 6,11% 9,30% 5,03%
Niemcy 1,29% 4,55% 2,12% 3,42% 2,84%
Grecja 1,04% 0,00% 0,00% 0,00% 0,26%
Węgry Brak danych 0,65% 0,00% 0,00% 0,22%
Irlandia 2,30% 3,76% 0,00% 0,00% 1,52%
Włochy 1,28% 0,40% 0,24% 0,56% 0,62%
Luksemburg 3,21% 0,81% 2,93% 1,98% 2,23%
Niderlandy 0,67% 0,00% 0,00% 0,00% 0,17%
Polska 0,00% 0,00% 0,00% 0,00% 0,00%
Portugalia 0,55% 0,71% 0,52% 0,58% 0,59%
Słowacja 0,00% 0,00% 0,00% 0,00% 0,00%
Słowenia 0,00% 0,00% 0,00% 0,00% 0,00%
Hiszpania 1,33% 1,29% 0,17% 0,30% 0,77%
Szwecja 2,39% 0,13% 0,00% 1,96% 1,12%
Zjednoczone Królestwo 2,09% 1,21% 0,18% 0,01% 0,87%
Komisja Europejska 9,31% 12,71% 14,67% 9,08% 11,45%
           
Średnia UE 2,03% 1,66% 1,39% 1,57% 1,66%
Średnia UE po wyłączeniu instytucji 1,65% 1,11% 0,73% 1,19% 1,17%

Źródło: Europejski Trybunał Obrachunkowy, na podstawie https://stats.oecd.org/

Załącznik II – Skontrolowane umowy

Numer umowy Państwo Sektor objęty wsparciem
Umowa nr 1 282613 Jordania Edukacja
Umowa nr  2 365198 Edukacja
Umowa nr  3 377271 Energia
Umowa nr  4 389306 Energia
Umowa nr  5 357967 Zarządzanie finansami publicznymi
Umowa nr  6 387662 Gruzja Rolnictwo
Umowa nr  7 344313 Kształcenie zawodowe
Umowa nr  8 361908 Reforma polityki finansów publicznych
Umowa nr  9 363227 Boliwia Walka z narkotykami
Umowa nr  10 368977 Gospodarka wodna
Umowa nr  11 337591 Rolnictwo
Umowa nr  12 377182 Rolnictwo
Umowa nr  13 383001 Etiopia Zdrowie publiczne
Umowa nr  14 367551 Transport
Umowa nr  15 348701 Mołdawia Plan działania na rzecz liberalizacji reżimu wizowego
Umowa nr  16 353323 Reforma polityki finansów publicznych
Umowa nr  17 371907 Rolnictwo
Umowa nr  18 376376 Rwanda Rolnictwo
Umowa nr  19 375269 Energia
Umowa nr  20 364033 Środowisko
Umowa nr  21 357701 Wietnam Zdrowie publiczne
Umowa nr  22 337112 Pakistan Rolnictwo
Umowa nr  23 289807 Edukacja
Umowa nr  24 356359 Edukacja

Załącznik III – Wypłaty środków w postaci transz zmiennych w 2017 r. w ramach umów o realizację reformy sektorowej

Kraj Transze zmienne wypłacone w 2017 r. ogółem
(w EUR)
Odsetek łącznej kwoty Skontrolowane sektory Skontrolowane kwoty
(w EUR)
Maroko 120 984 995 18,75%
Jordania 69 506 667 10,77% Reforma sektora edukacji, energii i administracji publicznej 45 750 000
Gruzja 37 900 000 5,87% Rolnictwo, zatrudnienie, finanse publiczne 19 400 000
Boliwia 32 800 000 5,08% Rolnictwo, walka z narkotykami, gospodarka wodna i kanalizacyjna 32 800 000
Etiopia 29 520 000 4,57% Zdrowie publiczne, transport 29 520 000
Mołdawia 29 345 111 4,55% Rolnictwo, wymiar sprawiedliwości, finanse publiczne 26 345 111
Rwanda 27 667 500 4,29% Rolnictwo, energia, ochrona środowiska 27 667 500
Wietnam 27 000 000 4,18% Zdrowie publiczne 27 000 000
Pakistan 25 665 625 3,98% Rolnictwo, edukacja 25 665 625
Tunezja 25 000 000 3,87%
Albania 20 775 000 3,22%
Niger 17 850 000 2,77%
Bangladesz 16 500 000 2,56%
Kolumbia 15 000 000 2,32%
Botswana 14 510 000 2,25%
Honduras 12 030 000 1,86%
Republika Południowej Afryki 10 466 458 1,62%
Senegal 10 450 000 1,62%
Burkina Faso 9 700 000 1,50%
Kirgistan 9 500 000 1,47%
Algieria 9 000 000 1,39%
Benin 8 000 000 1,24%
Indonezja 7 500 000 1,16%
Ukraina 7 500 000 1,16%
Kambodża 7 200 000 1,12%
Armenia 7 000 000 1,08%
Ghana 6 200 000 0,96%
Nepal 6 000 000 0,93%
Peru 5 880 000 0,91%
Grenlandia 4 634 634 0,72%
Laos 4 000 000 0,62%
Gujana 3 800 000 0,59%
Republika Dominikańska 2 687 500 0,42%
Samoa 2 360 238 0,37%
Falklandy 1 000 000 0,15%
Tonga 375 000 0,06%
OGÓŁEM 645 308 728 100%

Źródło: Europejski Trybunał Obrachunkowy (wytłuszczonym drukiem państwa wybrane na potrzeby kontroli).

Załącznik IV – Podsumowanie oceny

BOLIWIA ETIOPIA PAKISTAN RWANDA WIET­NAM
Umowa nr 9 Umowa nr 10 Umowa nr 11 Umowa nr 12 Umowa nr 13 Umowa nr 14 Umowa nr 22 Umowa nr 23 Umowa nr 24 Umowa nr 18 Umowa nr 19 Umowa nr 20 Umowa nr 21
Kompleksowa ocena zdolności? N N N Cz N Cz N N N Cz Cz N Cz
Liczba wskaźników (w przeliczeniu na transzę roczną w 2017 r.) 8 10 8 6 6 10 6 8 8 8 7 4 8
Liczba wskaźników z poprzednich lat, na podstawie których wypłacono środki w 2017 r. 0 0 0 0 0 0 0 0 0 0 4 0 0
Niepowiązane wartości docelowe 24 10 12 12 6 10 6 8 15 8 11 4 12
Nieszczegółowe wskaźniki 1 1 2 2 1 1 1 1 2 0 0 0 0
Bez wartości wyjściowych (podczas gdy zdaniem Trybunału należało je określić) 0 0 0 0 0 0 0 0 0 0 0 0 0
Nieprawidłowe wartości wyjściowe 1 0 0 0 1 10 0 0 1 0 1 2 0
Zbyt mało ambitne wartości docelowe 1 1 0 0 0 1 0 0 2 0 0 1 0
Czy pracownicy delegatury UE przeprowadzili wizytę w terenie, aby ocenić spełnienie warunków? N N T T N T N N N T N T N
Czy przy ocenie spełnienia warunków skorzystano z usług ekspertów zewnętrznych? N N N N N N T T T T N N T
Czy wystąpiły błędy arytmetyczne przy wyliczaniu wypłat? N N N N N N N N N N N N N
Czy prawidłowo zastosowano metodę obliczania płatności? T T T T N T T N N T T T T
Czy występują rozbieżności względem oceny przeprowadzonej przez Trybunał, jeśli chodzi o osiągnięcie wartości docelowych poszczególnych wskaźników / wskaźników cząstkowych? wskaźniki 2.2 oraz 3.3 wskaźniki 3.1 oraz 5 N N N 7 N wskaźniki 5, 6 oraz 8 wskaźniki 4, 6.2 i 6.3 N 5 wskaźniki 2 oraz 4 N
Czy występują rozbieżności względem oceny przeprowadzonej przez Trybunał, jeśli chodzi o kwotę do wypłacenia? Skutki jedynie dla przyszłych wypłat Brak skutków dla realizacji płatności >80% N N N 2 mln EUR N 1,50 mln EUR 3,47 mln EUR N 1,2 mln EUR 0,57 mln EUR N
GRUZJA JORDANIA MOŁDAWIA
Umowa nr 6 Umowa nr 7 Umowa nr 8 Umowa nr 1 Umowa nr 2 Umowa nr 3/4 Umowa nr 5 Umowa nr 15 Umowa nr 16 Umowa nr 17
Kompleksowa ocena zdolności? N T T N N T Cz T T Cz
Liczba wskaźników (na transzę roczną w 2017 r.) 11 15 14 0 5 9 10 34 12 28
Liczba wskaźników z poprzednich lat, dla których wypłacono kwoty w 2017 r. 0 3 0 2 0 0 0 3 0 0
Niepowiązane wartości docelowe 12 34 21 2 6 10 20 95 22 39
Nieszczegółowe wskaźniki 0 7 3 2 0 1 5 35 4 4
Bez wartości wyjściowych (podczas gdy zdaniem Trybunału należało je określić) 1 5 3 0 0 0 0 0 0 6
Nieprawidłowe wartości wyjściowe 1 0 0 1 1 0 1 0 0 0
Zbyt mało ambitne wartości docelowe 0 0 1 0 0 0 0 0 3 0
Czy pracownicy delegatur UE przeprowadzili wizyty w terenie, aby ocenić spełnienie warunków? T T T T T N T T T T
Czy przy ocenie spełnienia warunków skorzystano z usług ekspertów zewnętrznych? T T T T T T T T T T
Czy wystąpiły błędy arytmetyczne przy wyliczaniu wypłat? N N N T N N N T N N
Czy prawidłowo zastosowano metodę obliczania płatności? T T T T N T N N T T
Czy występują rozbieżności względem oceny przeprowadzonej przez Trybunał, jeśli chodzi o osiągnięcie wartości docelowych poszczególnych wskaźników / wskaźników cząstkowych? wskaźniki 1.2 oraz 1.7 N N 5 N N N T (wszystkie wskaźniki) N N
Czy występują rozbieżności względem oceny przeprowadzonej przez Trybunał, jeśli chodzi o kwotę do wypłacenia? 1 mln EUR N N 6 mln EUR N N N 5,1 mln EUR 6,4 mln EUR 14,8 mln EUR

LEGENDA: T – Tak, N – Nie, Cz – Częściowo.

Odpowiedzi Komisji

Streszczenie

I

Wsparcie budżetowe rozpatruje się jako pakiet obejmujący przekazywanie środków pieniężnych, dialog merytoryczny, budowanie zdolności i monitorowanie wykonania zadań. Wszystkie te elementy są istotne dla skuteczności tego instrumentu. Stałe transze zależą od postępu w realizacji ogólnych warunków wynikających z kryteriów kwalifikowalności do wsparcia budżetowego, natomiast kwota transz zmiennych będzie proporcjonalna do wyników osiągniętych w ramach niektórych konkretnych wskaźników.

II

W wytycznych dotyczących wsparcia budżetowego określono kryteria, które należy stosować przy określaniu wskaźników warunkujących wypłatę transz zmiennych, i proces ich weryfikacji. Pierwszeństwo przyznaje się dobrze zdefiniowanym wskaźnikom w politykach krajów partnerskich i zasadom ramowym monitorowania wykonania zadań.

III

Ponieważ wskaźniki warunkujące wypłatę transz zmiennych opracowano w taki sposób, by mierzyć je co roku, cele do osiągnięcia z natury mają charakter krótkoterminowy. Komisja musi określić cele, które można w rozsądny sposób osiągnąć z roku na rok. Nie przeszkadza to w podejmowaniu prób, które w większym stopniu wspierałyby stosowanie wskaźników wyniku, zwłaszcza w sektorach, które skorzystały z długoterminowego wsparcia UE, niemniej należy zapewnić połączenie różnych rodzajów wskaźników.

Na podstawie bazy danych Komisji, w której przechowuje się wszystkie wskaźniki wykonania wykorzystywane w umowach o świadczenie wsparcia budżetowego realizowanych w okresie od 2014 do 2018 r., można stwierdzić, że: wykorzystuje się lub wykorzystano połączenie różnych rodzajów wskaźników: wkładu, procesu, produktu i wyniku / rezultatów w dłuższej perspektywie czasowej. Próba objęta kontrolą zawierała więcej programów zatwierdzonych przed 2014 r., a zatem w mniejszym stopniu ukierunkowanych na długoterminowe wyniki.

IV

W wytycznych dotyczących wsparcia budżetowego zalecono wykorzystywanie od trzech do dziesięciu wskaźników. Komisja podkreśli, że duża liczba wskaźników może doprowadzić do braku ukierunkowania polityki i bardziej skomplikowanej oceny wniosku o wypłatę środków. W wyjątkowych przypadkach istnieje jednak możliwość zaakceptowania więcej niż dziesięciu wskaźników, jeżeli jest to uzasadnione przez ramy polityki i preferencje kraju partnerskiego.

V

Komisja jest zdania, że wiarygodność systemu statystycznego krajów partnerskich jest analizowana w ramach oceny zgodności polityki publicznej z kryteriami kwalifikowalności dotyczącymi wsparcia budżetowego i powinna również znaleźć potwierdzenie w ramach zarządzania ryzykiem. Według zmienionego niedawno wzoru zawiadomienia o wypłacie wymaga się zgłaszania aktualizacji zdolności analitycznej kraju i jakości danych przy każdym wniosku o wypłatę środków.

VI

Komisja jest zdania, że w przypadku płatności na rzecz Mołdawii uwzględniono pozytywny rozwój sytuacji w dziedzinie poszanowania skutecznych mechanizmów demokratycznych, praworządności i praw człowieka w momencie płatności, ale można było to lepiej udokumentować.

VII

Podpunkt pierwszy: Komisja przyjmuje to zalecenie.

Podpunkt drugi: Komisja przyjmuje to zalecenie.

Podpunkt trzeci: Komisja przyjmuje to zalecenie.

Podpunkt czwarty: Komisja przyjmuje to zalecenie.

Podpunkt piąty: Komisja przyjmuje to zalecenie.

Podpunkt szósty: Komisja przyjmuje to zalecenie.

Wstęp

01

Zobacz odpowiedź na streszczenie – pkt I.

02

Obok promowania rezultatów, przy wykorzystaniu systemów krajowych i dostosowaniu do polityk krajowych, wsparcie budżetowe sprzyja również rozliczalności wewnętrznej.

Uwagi

19

Komisja potwierdza, że wypłaty środków w ramach wsparcia budżetowego są dokonywane „ex post”, by nagrodzić dobre wykonanie zadań. Jak słusznie zauważa Europejski Trybunał Obrachunkowy, w tym kontekście wszystkie ogólne warunki, tj. postęp we wdrażaniu właściwej polityki publicznej, reforma zarządzania finansami publicznymi, przejrzystość i stabilność makroekonomiczna, są istotne dla oceny rezultatów.

21

Struktura transz zmiennych musi odpowiadać kontekstowi krajowemu i politycznemu. Wskaźniki należy wybierać zgodnie z ich znaczeniem w tym kontekście. W stosownych przypadkach pierwszeństwo należy przyznać wskaźnikom wyniku oraz należy zasadniczo dążyć do połączenia różnych rodzajów wskaźników, w tym wskaźników wkładu.

Przy określaniu wskaźników należy brać pod uwagę roczną częstotliwość wypłat w ramach wsparcia budżetowego oraz zdolność krajów partnerskich do kontrolowania wyników i oddziaływania.

22

Z wewnętrznej oceny Komisji dotyczącej pełnego zestawu wskaźników wykorzystywanych w transzach zmiennych (łącznie 3 642 wskaźniki), obejmującej okres od 2014 do 2018 r., wynika, że 33,7 % wskaźników to wskaźniki wyniku, 26,8 % to wskaźniki produktu, 35,4 % to wskaźniki procesu, a pozostałe wskaźniki (4,1 %) to wskaźniki wkładu i wskaźniki oddziaływania.

Próba objęta kontrolą zawierała więcej programów zatwierdzonych przed 2014 r., a zatem w mniejszym stopniu ukierunkowanych na długoterminowe wyniki. Obecnie praktykuje się bardziej zrównoważone wykorzystanie poszczególnych wskaźników.

23

Wybór wskaźników jest związany również z dojrzałością polityki publicznej i wieloma kwestiami związanymi ze szczególnym kontekstem (problemy atrybucji, zarządzanie sektorem, podział pracy wśród partnerów w obszarze rozwoju itd.).

Należy zauważyć, że zgodnie z klasyfikacją Banku Światowego od 2017 r. Jordanii nie uważa się już za kraj o wyższym średnim dochodzie, ale za kraj o średnim niższym dochodzie.

24

Komisja stwierdza, że w pewnych przypadkach wskaźniki wkładu mogą odgrywać użyteczną rolę i na początkowych etapach reformy pomagają w określeniu warunków dla długoterminowych rezultatów w późniejszym terminie. W programach wsparcia budżetowego od 2014 r. udział wskaźników wkładu w transzach zmiennych wynosi jedynie 4 % (zob. odpowiedź do pkt 22).

25

Wskaźniki procesu są istotne, jeżeli chodzi o ocenę postępów w budowaniu zdolności i dobrym zarządzaniu sektorem. Ponadto kiedy bierze się pod uwagę cały program wsparcia budżetowego, w ocenie postępów w zakresie ogólnego wdrożenia polityki publicznej analizuje się aspekty jakościowe. Można się do nich odnosić również poprzez budowanie dialogu i zdolności, dlatego tak istotne jest, aby nie ograniczać oddziaływania wsparcia budżetowego wyłącznie do wskaźników warunkujących wypłatę transz zmiennych.

Ramka 2 – Przykłady wskaźników procesu pozbawionych jakichkolwiek specyfikacji jakościowych

W odniesieniu do Mołdawii (umowa nr 15: Plan działania na rzecz liberalizacji reżimu wizowego)

Plan działania na rzecz liberalizacji reżimu wizowego (VLAP) jest działaniem objętym ścisłą kontrolą instytucji europejskich i państw członkowskich z bardzo mocnym zewnętrznym (unijnym) systemem monitorowania. Chociaż w schemacie polityki nie ma żadnego odniesienia do ram regulacyjnych, które mają zostać przyjęte, jakość tych ram jest wyraźnie zdefiniowana w odnośnym dorobku wspólnotowym, a zatem ramy (wskaźniki liberalizacji reżimu wizowego) określono w innych dokumentach. Należy zauważyć, że sprawozdania VLAP, w których wykazano zadowalający postęp, przedstawiono Parlamentowi i Radzie.

W odniesieniu do Jordanii (umowa nr 4: Wsparcie energetyczne)

Cel polegał na zapewnieniu, by ustanawiano i skutecznie wdrażano strukturę dialogu merytorycznego (co oznacza regularne spotkania, a nie tylko określenie struktury pod względem administracyjnym). Aby zapewnić zaangażowanie ze strony rządu, Komisja pozwoliła krajowi partnerskiemu zdecydować o dokładnej strukturze, układzie i częstotliwości spotkań.

27

Komisja podkreśla, że ustalenie Europejskiego Trybunału Obrachunkowego dotyczące niewystarczająco szczegółowych wskaźników wynika z wielu powodów, co zilustrowano w przykładach w pkt 28ramce 3. W większości przypadków wskaźniki te nie prowadziły do rozbieżnych wniosków z oceny wskaźnika dokonanej przez Europejski Trybunał Obrachunkowy i Komisję.

Ramka 3 – Przykłady nieszczegółowych wskaźników i poziomów docelowych

W odniesieniu do Jordanii (umowa nr 1):

Zewnętrzny ekspert, analizując osiągnięcie celu, nie opracował w pełni własnych kryteriów i w celu stwierdzenia, czy wyposażenie szkół było odpowiednie, polegał na kryteriach, które już opisano szczegółowo w postanowieniach technicznych i administracyjnych (TAP) umowy w sprawie finansowania; np. fakt, że szkoły będą budowane i wyposażane według wytycznych Jordanii z 2018 r. oraz wyposażane w panele fotowoltaiczne do ogrzewania wody i inne systemy energii ze źródeł odnawialnych i efektywności energetycznej. W postanowieniach technicznych i administracyjnych ustalono również, że nowo mianowani nauczyciele będą musieli ukończyć co najmniej wprowadzający kurs szkoleniowy dla nauczycieli.

Ponadto „odpowiedni” charakter środków / warunków nauczania i zasobów ludzkich w tych szkołach musiał być elastyczny, aby mogły one dostosować się do bardzo płynnej sytuacji kryzysowej dotyczącej setek tysięcy nowych uczniów będących uchodźcami, którzy muszą chodzić do szkoły. Prócz tego „odpowiedni” charakter omawiano szczegółowo w ramach regularnego dialogu merytorycznego między delegaturą Unii a Ministerstwem Edukacji.

W odniesieniu do Gruzji (umowa nr 8):

Celem szczegółowym wskaźnika było podniesienie poziomu świadomości wśród zainteresowanych stron, jeżeli chodzi o reguły fiskalne i zarządzanie budżetem. Środkami interpretacji były protokoły ze spotkań i wywiady z zainteresowanymi stronami. Wskaźnik miał na celu promowanie kultury przejrzystości i odpowiedzialności względem obywateli. Ocena była dokładna i obejmowała protokoły ze spotkań i wywiady z zainteresowanymi stronami.

Ramka 4 – Pomiar jakości kształcenia – przykład dobrych praktyk

Ta praktyka mierzenia wskaźników związanych z jakością kształcenia jest bardzo istotna, a model zainicjowany w omawianym programie wsparcia budżetowego był potem powtarzany przez innych darczyńców w Jordanii. Wyznacza ona zasadniczy kierunek całego późniejszego wsparcia na rzecz jordańskiego systemu kształcenia udzielonego od tamtego czasu przez UE.

Omawiany wskaźnik jest obecnie elementem Planu strategicznego w dziedzinie edukacji na lata 2018–2022, a odpowiednia jednostka Ministerstwa Edukacji została przeszkolona w zakresie metody umożliwiającej rozszerzenie ocen na cały kraj.

Należy jednak podkreślić, że gromadzenie danych na potrzeby wskaźnika powinno stać się elementem regularnego gromadzenia danych w kraju; należy unikać jednorazowych, kosztownych i nieefektywnych czasowo metod, które stosuje się jedynie do celów programu wsparcia budżetowego.

30

Komisja zgadza się, że w stosownych przypadkach należy określać poziom wyjściowy dla wskaźników, jeżeli taki poziom wyjściowy jest dla nich adekwatny i aktualizowany.

31

Zobacz odpowiedź Komisji do pkt 30.

32

Komisja zgadza się, że poziomy wyjściowe należy aktualizować w oparciu o istotne dane, jeżeli jest to możliwe, z uwzględnieniem kosztów transakcji związanych z wprowadzaniem poprawek do umów o świadczenie wsparcia budżetowego.

Ramka 6 – Przykłady wskaźników z nieprawidłowymi wartościami wyjściowymi lub bez wartości wyjściowych

W odniesieniu do Gruzji (umowa nr 7):

Umowa „Zatrudnienie oraz kształcenie i szkolenie zawodowe” obejmuje cztery wskaźniki, które odnoszą się do wzrostu (np. liczby szkoleń) w miarę upływu czasu. W dwóch przypadkach umowa w sprawie finansowania odnosi się do poziomu wyjściowego z dnia 31 grudnia 2013 r., który nie był dostępny w momencie podpisywania umowy w sprawie finansowania.

Jeżeli chodzi o konkretny przypadek, o którym jest tutaj mowa, w umowie w sprawie finansowania nie określono żadnych wartości wyjściowych dla wskaźników. W związku z tym, aby ocenić wskaźnik 2.2.1 (wzrost o 15 %, jeżeli chodzi o nauczycieli objętych szkoleniem wstępnym zgodnie z nową polityką dotyczącą rozwoju nauczycieli w kształceniu i szkoleniu zawodowym) oraz wskaźnik 2.2.2 (15 % nauczycieli objętych kształceniem przez całe życie), konieczne było sięgnięcie do dodatkowych źródeł. Ponieważ wskaźniki nie miały poziomów wyjściowych, jedynie tendencja wzrostowa mogła posłużyć jako podstawa uzasadniająca dokonanie płatności. W związku z tym oceniający oraz Komisja rozważyli postępy w sektorze, by wyciągnąć merytoryczne wnioski, biorąc pod uwagę charakter wskaźnika.

W odniesieniu do Boliwii (umowa nr 9):

Należy zauważyć, że mimo iż cele na 2016 r. były mniej ambitne w porównaniu z poziomem wyjściowym, cele na lata 2017 i 2018 były bardziej wymagające, a tym samym zapewniono osiągnięcie zamierzonych rezultatów.

34

Komisja zaznacza, że ogólnym celem budowania zdolności przez UE jest wkład w zrównoważony wzrost zdolności w krajach partnerskich nawet po zakończeniu programu wsparcia budżetowego. Zakres umów w zakresie budowania zdolności jest szerszy i raczej uzupełniają one niż zastępują zachętę zapewnianą przez wskaźniki. Komisja stwierdza, że było tak w przypadku trzech umów, o których wspomniał Europejski Trybunał Obrachunkowy.

Ramka 7 – Przykłady wskaźników, w przypadku których poziomy docelowe były łatwe do osiągnięcia

Należy podkreślić, że oba wskaźniki – 4 „Wzmocnienie boliwijskiego obserwatorium ds. narkotyków” oraz 7 „Ramy instytucjonalne rozwoju CONALTID” (Consejo Nacional de lucha contra el tráfico ilícito de drogas) – związane są ze wzmacnianiem roli CONALTID, jeżeli chodzi o koordynację międzyinstytucjonalną w celu poprawy skuteczności wspieranej strategii.

Biorąc pod uwagę wcześniejszy brak koordynacji międzyinstytucjonalnej, wskaźnik ten stanowi użyteczne przybliżenie poziomu zaangażowania rządu w strategię.

Chociaż wskaźnik (w umowie nr 9) może wydawać się skromny, jest on bardzo istotny w tym konkretnym kontekście, ponieważ motywuje do niezbędnej koordynacji między poszczególnymi ministerstwami zaangażowanymi w walkę z przemytem narkotyków i powiązanymi z nim przestępstwami. Jest to przykład, w ramach którego, znając lokalny kontekst, delegatura Unii uznała znaczenie konsolidacji funkcji koordynacyjnej nowej instytucji (CONALTID). Cel wskaźnika należy zatem ocenić w konkretnym kontekście. To samo dotyczy wskaźnika 4, który uważany jest za dowód, że CONALTID odgrywał swoją rolę koordynacyjną, a system monitorowania działał w zrównoważony sposób.

35

Liczba wskaźników w ramach planu działania na rzecz liberalizacji reżimu wizowego w Mołdawii wynika z dialogu merytorycznego i późniejszej umowy z krajem partnerskim. W tym szczególnym przypadku pierwszeństwo przyznano włączeniu wszystkich wskaźników do schematu polityki rządu. Organy uznały to za dodatkową zachętę do wdrożenia całego planu działania.

Ramka 8 – Duża liczba wskaźników

Schemat polityki w Mołdawii obejmuje siedem warunków lub głównych wskaźników (jak ustalono w umowie w sprawie finansowania) odpowiadających siedmiu obszarom strategii krajowej. Następnie mamy 28 wskaźników cząstkowych, które są konkretne i istotne dla właściwej realizacji strategii.

37

W fazie projektowej Komisja ocenia informacje dotyczące wiarygodności danych w celu podjęcia decyzji, które źródło weryfikacji jest najbardziej odpowiednie oraz kiedy staje się dostępne. Uchybienia w zakresie systemu statystycznego wspieranych sektorów wymagają zastosowania środków zmniejszających ryzyko, np. przeglądu dokonanego przez zewnętrznych ekspertów, uzupełniającej pomocy UE (lub innych darczyńców) w celu poprawy zdolności statystycznych.

39

Zobacz odpowiedzi Komisji do pkt V.

41

Komisja stwierdza, że łącząc analizę kryterium kwalifikowalności polityki publicznej oraz ramy zarządzania ryzykiem jest w stanie uzyskać wystarczające informacje na temat jakości systemu monitorowania i oceny kraju partnerskiego.

42

Aby zagwarantować konieczny poziom pewności, który uzasadniałby dokonanie odnośnej płatności, stosuje się zróżnicowane procedury weryfikacyjne. Zobacz pkt 43.

43

Aby dokonać oceny zgodności, w odniesieniu do każdej wypłaty Komisja stosuje połączenie różnych rodzajów procedur weryfikacji. W przypadku każdej wypłaty delegatury i służby w siedzibie głównej dokonują przeglądu wszystkich dokumentów potwierdzających. W stosownych przypadkach podjęte być mogą również wizyty w terenie. Analogicznie, kiedy charakter informacji jest wysoce wyspecjalizowany lub ocena osiągnięcia celów wymaga mocnej oceny jakościowej, mogą zostać zatrudnieni eksperci zewnętrzni.

44

Misje ekspertów zewnętrznych należy wykorzystywać w sposób komplementarny. Ich wartość dodana wynika z ich niezależności i dodatkowej wiedzy fachowej i nie powinny one zastępować bezpośredniej weryfikacji i decyzji delegatury, ale umożliwiać kontrolę krzyżową wyników.

45

Komisja podziela wniosek z analizy Europejskiego Trybunału Obrachunkowego, że jakość danych pochodzących z krajów partnerskich powinna być istotnym czynnikiem, jeżeli chodzi o korzystanie z pomocy ekspertów w zakresie weryfikacji. Korzystanie z pomocy zewnętrznych ekspertów może być jednak uzasadnione nawet jeśli system monitorowania danego kraju jest wiarygodny. W niektórych przypadkach UE potrzebuje wysoce technicznej wiedzy fachowej, by zweryfikować szczególne kryteria istotne do celów obliczenia wskaźnika.

46

Wsparcie budżetowe jako instrument oparty na partnerstwie i zaufaniu działa w szeregu sektorów, w których partnerzy w obszarze rozwoju polegają na regularnej sprawozdawczości krajów partnerskich.

Komisja jest zdania, że we wskazanych przypadkach dokumenty potwierdzające przekazane przez partnera wdrażającego rozpatrywane w połączeniu z oceną eksperta zewnętrznego i wyjaśnieniami przedstawionymi na żądanie władz zapewniały wystarczające informacje do dokonania kontroli krzyżowej i wyciągnięcia wniosku w sprawie wiarygodności danych.

Ramka 10 – Przykłady niedociągnięć wykrytych w pracach ekspertów zewnętrznych

a) Doboru próby w odniesieniu do umowy nr 2 w Jordanii dokonano w ścisłej współpracy z innymi właściwymi partnerami, w tym UNESCO. Kryteria doboru próby oparto na elementach, które obejmowały:

  • szkoły publiczne Ministerstwa Edukacji na obszarach miejskich (w tym szkoły w wynajętych obiektach);
  • szkoły i przestrzenie do nauki w obozach dla uchodźców;
  • szkoły jednozmianowe i dwuzmianowe (duże zagęszczenie uczniów);
  • reprezentację nauczania podstawowego i średniego;
  • reprezentację w próbie pilotażowej systemu EMIS (OpenEMIS, UNESCO);
  • korelację wybranych szkół z koncentracją syryjskich uchodźców w regionie/mieście.

W związku z tym wnioski dotyczące włączania szkół do próby składano z myślą o posiadaniu szerokiej gamy kryteriów oraz w celu zapewnienia włączenia 8 dyrekcji z dużą koncentracją uczniów syryjskich. W celu uniknięcia wszelkiej możliwej stronniczości w procesie wyboru Ministerstwo Edukacji nie było bezpośrednio zaangażowane w dobór szkół do próby. Działało raczej jako zespół konsultantów wraz z UNESCO, które składało wnioski po wyborze szkół z bazy danych szkół (nie z systemu EMIS, który w tamtym czasie nie funkcjonował), podczas gdy Ministerstwo Edukacji musiało oczywiście zatwierdzić próbę w celu ułatwienia dostępu do szkół.

b) Wszystkie 30 szkół umieszczono w bazie danych na potrzeby misji weryfikacji w terenie, jednak w odnośnym sprawozdaniu z misji wymieniono tylko 17 szkół (str. 14 i 16/17), ponieważ w czasie misji porównywalne dane EMIS były dostępne jedynie w odniesieniu do tych 17 szkół. Wnioski ekspertów zewnętrznych zostały zatem wyciągnięte na podstawie najlepszej dostępnej w tamtym czasie próby.

d) Konsultanci zapoznali się z autentycznymi dziennikami szkolnymi i rzeczywistym poziomem skolaryzacji w dniu wizyty; właśnie te elementy rejestrowano w bazie danych w odpowiednich kolumnach. Komisja uważa, że takich różnic należy się spodziewać w bardzo płynnym kontekście kryzysu, w którym liczba uczniów i frekwencja zmieniały się.

47

W odniesieniu do Pakistanu Komisja zgadza się, że w przypadku czterech wskaźników (wskaźniki 5 i 6 w umowie nr 23 oraz wskaźniki 4 i 6.3 w umowie nr 24) dowody potwierdzające wyniki miały pewne braki i rozwiąże tę sytuację w przyszłości.

W odniesieniu do wskaźnika 8 w umowie nr 23 (program edukacji Sindh) Komisja twierdzi, że przekazane dowody potwierdzały realizację celów.

W odniesieniu do wskaźnika 8 cel uznano za zrealizowany na podstawie rocznego planu prac Regionalnego Centrum Oceny Kształcenia (PEACE) z zaproponowanym budżetem zarówno w przypadku PEACE, jak i SESLOAF oraz 74–stronicowego „Sprawozdania końcowego z wdrażania SESLOAF” potwierdzającego, że SESLOAF wdrożono w celu poprawy procesu uczenia się uczniów.

Komisja zgadza się, że wskaźnik nie został sformułowany wystarczająco jasno, co doprowadziło do różnych obliczeń, prowadzących w rezultacie do jedynie marginalnych różnic w osiągniętych wynikach. Niezależnie od tego, którą metodę się stosuje, osiągnięte wyniki są istotne pod względem zwiększania skali systemu bonów, dzięki któremu do szkoły uczęszcza o wiele więcej dzieci.

W odniesieniu do wskaźnika 4 Komisja zgadza się, że występują drobne nieprawidłowości w dostępnych danych statystycznych. Braki stwierdzono już w czasie określania i formułowania projektu. W konsekwencji w celu zaradzenia im Komisja świadczyła pomoc techniczną na rzecz systemu informacji zarządczej na temat edukacji. W związku z tym Komisja wdrożyła odpowiednie i skuteczne środki w celu ograniczenia ryzyka wynikającego z niedociągnięć stwierdzonych w danych statystycznych.

Jeśli chodzi o Gruzję i odniesienie do ustawy w sprawie nasion – wskaźnik 1.2 (umowa nr 6) – Komisja przyznaje, że wystąpiło niewielkie opóźnienie trwające dwa miesiące. Komisja uznała, że dodatkowy czas wykorzystano w celu poprawy jakości procesu (proces bardziej partycypacyjny i sprzyjający włączeniu, obejmujący wszystkie zainteresowane strony) i jakości wyników (ustawa w sprawie nasion jest obecnie zgodna z normami międzynarodowymi i unijnymi oraz stanowi solidną podstawę dla dobrze uregulowanego sektora). Ponadto Komisja uwzględniła decyzję rządu o przyspieszeniu działań w celu zrekompensowania opóźnionego przyjęcia ustawy oraz w celu zapewnienia szybkiego wdrażania (przygotowanie prawa wtórnego nawet przed formalnym przyjęciem ustawy, skrócone ramy czasowe na certyfikację pszenicy, tylko 6 miesięcy przed wejściem w życie ustawy w sprawie nasion). Biorąc to wszystko pod uwagę, Komisja podjęła decyzję, że wysiłki takie powinny zostać nagrodzone, pomimo niewielkiego opóźnienia.

Ramka 11 – Informacje poświadczające oparte na niereprezentatywnej próbie

W przypadku informacji poświadczających przedstawionych w odniesieniu do wskaźnika 6.3 w umowie KP dotyczącej sektora edukacji w Pakistanie (umowa nr 24) to nie pomoc techniczna wyznacza interpretację wymaganych informacji poświadczających.

W umowie w sprawie finansowania nie określono metody doboru próby w odniesieniu do mierzenia wskaźnika frekwencji. W związku z tym Komisja polegała na wynikach już zmierzonego wskaźnika frekwencji szkolnej, który był wyższy niż wartość docelowa, w związku z czym Komisja uznała cel za osiągnięty.

50

Komisja twierdzi, że w trzech z pięciu przypadków (wskaźnik 1.2 w umowie nr 6, wskaźnik 2.1 i 2.2 w umowie nr 16) niewielkie opóźnienie – od jednego do trzech miesięcy – w dotrzymaniu terminu było spowodowane dodatkowymi działaniami na rzecz jakości realizowanymi przez organ wdrażający w celu zapewnienia wysokiej jakości wykonania zadań (tj. projektowaniem ustawy, którą przyjęto zgodnie z najlepszymi praktykami administracji publicznej po przeprowadzeniu szeroko zakrojonego procesu konsultacji) i nie miało wpływu na kolejne etapy reformy.

Trzymanie się trudnego do zrealizowania terminu i nieuznanie z tego powodu zasług wynikających z dodatkowych wysiłków podejmowanych przez partnera przyniosłoby efekt przeciwny do zamierzonego. W odniesieniu do czwartego przypadku (wskaźnik 5 w umowie nr 1) zob. odpowiedź do ramki 12.

Ramka 12 – Wartości docelowe osiągnięto po upływie wyznaczonych terminów, osiągnięto je częściowo lub nie osiągnięto ich wcale

W odniesieniu do Jordanii (umowa nr 1):

W 2015 r. umowę przedłużono do końca 2017 r., w szczególności w celu umożliwienia rządowi sfinalizowania budowy sześciu szkół i zrealizowania wskaźnika 2.2, na co pozwalają postanowienia techniczne i administracyjne zawarte w umowie w sprawie finansowania, która stanowi (art. 2.2), że „w przypadku gdy część środków finansowych pozostanie po tym terminie niewydatkowana, Beneficjent oraz Komisja Europejska mogą uzgodnić jedną dodatkową wypłatę na podstawie oceny pozostałych do zrealizowania celów przeprowadzonej według tych samych zasad, co dwie poprzednie transze zmienne. Jeśli ta dodatkowa wypłata jest uzasadniona, dokonuje się jej do dnia zakończenia fazy wdrażania operacyjnego i można ją dodać do ostatniej płatności transzy zmiennej”. Tak było w tym przypadku.

  • 1/ Początkowy termin dwóch lat ustanowiono w kontekście politycznym świadczenia wsparcia kryzysowego w sytuacji wyjątkowej. Był on bardzo ambitny, biorąc pod uwagę ramy czasowe wymagane do przeprowadzenia przetargu na prace w sektorze publicznym oraz wysiłek, jaki trzeba włożyć w zbudowanie i wyposażenie sześciu szkół. Dobrze zdawały sobie z tego sprawę władze Jordanii, które proaktywnie wnioskowały o przedłużenie terminu w czasie wprowadzania tego wskaźnika, a także później, podczas wdrażania. Komisja ściśle monitorowała wdrażanie i dokonywała niezbędnych przedłużeń okresu obowiązywania umowy w sprawie finansowania, dostosowując się do sytuacji.
  • 2/ Komisja podjęła ważne zobowiązania polityczne przewidujące wsparcie Jordanii w radzeniu sobie z konsekwencjami kryzysu syryjskiego poprzez różne konferencje darczyńców i deklaracje polityczne na wysokim szczeblu w całym okresie obowiązywania tej umowy. Dodanie wskaźnika 5 do umowy w sprawie finansowania było częścią pakietu Komisji w ramach tych zobowiązań.
  • 3/ Wypłata została udostępniona wyłącznie ze względu na osiągnięcie wartości docelowych. Oprócz jednej szkoły, którą ukończono w 2017 r., od 2016 r. pozostałych pięć szkół stopniowo przyjmowało syryjskich uczniów. Biorąc pod uwagę ogólną liczbę syryjskich uchodźców już obecnych w tamtym czasie w Jordanii, stanowiło to godny pochwały wysiłek na rzecz zapewnienia dzieciom-uchodźcom dostępu do nauki szkolnej.

W odniesieniu do Pakistanu (umowa nr 23) cel dotyczący wskaźnika 6 osiągnięto w znacznym stopniu, ponieważ opracowano program nauczania języka angielskiego i przygotowano rękopisy podręczników.

W odniesieniu do Gruzji (umowa nr 6):

Jeśli chodzi o wskaźnik 1.7, wartość docelową w odniesieniu do sformułowania celu i źródła jego weryfikacji osiągnięto zgodnie z postanowieniami umowy w sprawie finansowania, w której nawiązano do przyjęcia programu państwowego w drodze dekretu. Państwowy program na rzecz plantacji herbaty i ich rekultywacji miał na celu między innymi zwiększanie produkcji herbaty, w tym produkcji herbaty ekologicznej. Uznano również, że wybór herbaty był strategiczny ze względu na jej znaczny potencjał w zakresie produkcji ekologicznej. Chociaż wskaźnik można było lepiej sformułować, wstrzymywanie płatności odbiegałoby od postanowień umowy w sprawie finansowania i naruszałoby nasze zobowiązania wobec władz gruzińskich.

Ramka 13 – Wartości docelowe wyznaczone w oparciu o nieprawidłowe wartości wyjściowe – nie dokonano faktycznych postępów

W odniesieniu do Etiopii (umowa nr 14): Biorąc pod uwagę znaczne postępy poczynione w ostatnich latach w zmniejszaniu liczby przeciążonych ciężarówek (czego dowodzi tabela poniżej), Komisja uznała, że płatność jest uzasadniona, pomimo ponownej oceny wartości wyjściowych na lata 2011/2012 w przeglądzie sektorowym dokonanym niedługo przed datą wypłaty. Cele długoterminowe planowane na 2020 r. osiągnięto znacznie wcześniej niż oczekiwano.

W czasie obowiązywania umowy w sprawie finansowania Komisja ustaliła wartość wyjściową na podstawie najlepszych możliwych dostępnych informacji i musiała dokonywać płatności na podstawie tego, co podpisały obie strony. Komisja utrzymuje, że istniały argumenty prawne przemawiające za dokonaniem płatności na podstawie wskaźnika.

Ramka 14 – Brak wystarczających dowodów poświadczających

W odniesieniu do Jordanii (umowa nr 5):

Wskaźnik 1.2 (w umowie nr 5, dot. wsparcia zarządzania finansami publicznymi w Jordanii) poddano ocenie poprzez dokonanie przeglądu list obecności podpisanych przez uczestników kursów szkoleniowych oferowanych pracownikom jednostek kontroli wewnętrznej. Należy podkreślić, że ustanowienie jednostek kontroli wewnętrznej jest jednym z głównych ostatnich osiągnięć w zakresie zarządzania finansami publicznymi, wspieranym przez obecny program unijny.

W odniesieniu do wskaźnika 3 w umowie dotyczącej programu rozwoju społeczności lokalnych (umowa nr 22, Pakistan) obliczenia szacunków kosztów na szczeblu dystryktów nie były ani jednoznaczne, ani konkretnie powiązane ze strategiami rozwojowymi w odniesieniu do płatności w roku obrotowym 2016/2017. Zostanie to skorygowane, a w odniesieniu do roku obrotowego 2018/2019, w przypadku płatności salda końcowego planowanej na 2020 r. szacunki kosztów na szczeblu dystryktów będą powiązane ze strategiami rozwojowymi.

53

Zobacz odpowiedź Komisji do ramki 15.

Ramka 15 – Dokumentacja płatności na rzecz Mołdawii

Komisja utrzymuje, że płatność była uzasadniona, ale pozytywny rozwój sytuacji w dziedzinie poszanowania skutecznych mechanizmów demokratycznych, praworządności i praw człowieka w Mołdawii w momencie płatności można było lepiej udokumentować.

Wnioski i zalecenia

54

W wytycznych dotyczących wsparcia budżetowego określono kryteria, które należy stosować przy definiowaniu wskaźników warunkujących wypłatę transz zmiennych, i proces ich weryfikacji. Pierwszeństwo przyznaje się dobrze zdefiniowanym wskaźnikom w politykach krajów partnerskich i zasadom ramowym monitorowania wykonania zadań.

55

Na podstawie bazy danych Komisji, w której przechowuje się wszystkie wskaźniki wykonania wykorzystywane w odniesieniu do umów o świadczenie wsparcia budżetowego realizowanych w okresie od 2014 do 2018 r., można stwierdzić, że: wykorzystuje się lub wykorzystano połączenie różnych rodzajów wskaźników: wkładu, procesu, produktu i wyniku / rezultatów w dłuższej perspektywie czasowej. Próba objęta kontrolą zawierała więcej programów zatwierdzonych przed 2014 r., a zatem w mniejszym stopniu ukierunkowanych na długoterminowe wyniki. Obecnie praktykuje się bardziej zrównoważone wykorzystanie różnych rodzajów wskaźników.

Zalecenie 1 – Częstsze korzystanie ze wskaźników wyniku na potrzeby transz zmiennych

Komisja przyjmuje to zalecenie.

Komisja zgadza się z zaleceniem, aby w stosownych przypadkach w większym stopniu wykorzystywać wskaźniki wyniku. Wskaźniki wyniku są jednak w niektórych sytuacjach niezgodne z rocznym harmonogramem wypłat i napotykają również problemy atrybucji, tj. rząd nie kontroluje osiągania wartości docelowych.

Zalecenie 2 – Udoskonalenie koncepcji wskaźników wykonania

Komisja przyjmuje to zalecenie.

Zalecenie 3 – Zapewnienie, by transze zmienne wywoływały odpowiedni efekt zachęty

Komisja przyjmuje to zalecenie.

Jeśli chodzi o lit. b), unijne umowy w zakresie budowania zdolności mają zazwyczaj na celu przyczynianie się do zrównoważonego zwiększania zdolności w krajach partnerskich. Zakres umów w zakresie budowania zdolności jest szerszy i raczej uzupełniają one niż zastępują zachętę zapewnianą przez wskaźniki.

Zalecenie 4 – Uproszczenie procesu wypłacania transz zmiennych

Komisja przyjmuje to zalecenie.

59

Komisja stwierdza, że wiarygodność systemu statystycznego krajów partnerskich jest analizowana w ramach oceny zgodności polityki publicznej z kryteriami kwalifikowalności dotyczącymi wsparcia budżetowego i powinna również znaleźć potwierdzenie w ramach zarządzania ryzykiem. Według zmienionego niedawno wzoru zawiadomienia o wypłacie wymaga się zgłaszania aktualizacji zdolności analitycznej kraju i jakości danych przy każdym wniosku o wypłatę środków.

Zalecenie 5 – Udoskonalenie oceny zdolności poszczególnych krajów do generowania danych na temat wykonania wykorzystywanych na potrzeby transz zmiennych

Komisja przyjmuje to zalecenie.

60

Komisja stosuje określony zestaw procedur weryfikacji w odniesieniu do każdego wniosku o wypłatę środków. Przegląd dokumentacji dokonywany przez pracowników delegatur i centrali, obejmujący wszystkie dowody potwierdzające i dodatkową wymianę informacji z władzami, a także – w stosownych przypadkach – przeprowadzenie misji w terenie i zatrudnienie ekspertów wewnętrznych, jeśli potrzeba specjalistycznej wiedzy fachowej.

Zalecenie 6 – Usprawnienie weryfikacji danych na temat wykonania wykorzystywanych na potrzeby wypłacania środków w ramach transz zmiennych

Komisja przyjmuje to zalecenie.

Komisja zgadza się z lit. a), aby dokonywać przeglądu dowodów potwierdzających dane na temat wykonania, jeśli nie stwierdzono jednoznacznie, że dane te są wiarygodne.

Komisja przyjmuje również zalecenie b).

61

Jak wyjaśniono w odpowiedzi do ramki 12, Komisja twierdzi, że kwota 6 mln euro dla Jordanii nie powinna być zawarta w ogólnej kwocie rozbieżności, ponieważ płatności dokonano po osiągnięciu wartości docelowej oraz w terminie przyznanym w ramach przedłużenia umowy w sprawie finansowania.

W odniesieniu do Pakistanu, Gruzji i Mołdawii zob. odpowiedź do ramki 15pkt 47.

Zespół kontrolny

Sprawozdania specjalne Trybunału przedstawiają wyniki kontroli dotyczących polityk i programów UE bądź kwestii związanych z zarządzaniem w wybranych obszarach budżetowych. Trybunał wybiera i opracowuje zadania kontrolne tak, aby osiągnąć jak największe oddziaływanie, biorąc przy tym pod uwagę kryteria takie jak zagrożenia dla wykonania zadań lub zgodności, poziom dochodów lub wydatków w danym obszarze, nadchodzące zmiany oraz interes polityczny i społeczny.

Niniejsza kontrola wykonania zadań została przeprowadzona przez Izbę III, zajmującą się obszarami wydatków dotyczącymi działań zewnętrznych, bezpieczeństwa i sprawiedliwości. Izbie tej przewodniczy członek Trybunału Hannu Takkula. W działania kontrolne zaangażowani byli: Turo Hentila, szef gabinetu; Helka Nykaenen, attaché; Alejandro Ballester Gallardo, kierownik; Piotr Zych, koordynator zadania, a także kontrolerzy: Eva Coria Paramas, Roberto Ruiz Ruiz, Erika Söveges oraz Nita Tennila. Wsparcie językowe zapewnił Richard Moore.

Od lewej: Turo Hentila, Helka Nykaenen, Hannu Takkula, Alejandro Ballester Gallardo, Nita Tennila, Piotr Zych, Erika Söveges, Roberto Ruiz Ruiz.

Przypisy

1 Art. 236 ust. 1 rozporządzenia finansowego mającego zastosowanie do budżetu ogólnego Unii, lipiec 2018 r.

2 Publikacja Komisji pt. „Budget Support: Trends and Results”, 2018, s. 61.

3 Z wyjątkiem Maroka, któremu Trybunał poświęcił osobne sprawozdanie specjalne. Publikację tego sprawozdania zaplanowano na 2020 r.

4 Wytyczne dotyczące wsparcia budżetowego, 2017, s. 138.

5 W próbie dobranej przez Trybunał znalazły się 163 wskaźniki z wartościami docelowymi, które nie wymagają podania poziomu wyjściowego, ponieważ nie mają one mierzyć przebiegu danej zmiennej (np. „przyjęto przepisy” lub „zorganizowano pewną liczbę spotkań”). Wskaźniki te nie zostały wzięte pod uwagę na potrzeby niniejszej oceny.

6 Wytyczne dotyczące wsparcia budżetowego, 2017, s. 139.

7 Liczba te nie uwzględnia wskaźników dla transz z poprzednich lat.

8 Narzędzie Snapshot daje dostęp do metod analizy odnoszących się do następujących kluczowych obszarów, które należy koniecznie uwzględnić w ramach oceny systemów statystycznych: (i) ramy prawne, instytucjonalne i strategiczne na rzecz generowania danych statystycznych i monitorowania na szczeblu krajowym i sektorowym; (ii) adekwatność zasobów (tj. ilość i jakość zasobów kadrowych, sprzętu, środków finansowych); (iii) czynniki warunkujące jakość danych (tj. zobowiązania w zakresie jakości, niezależność zawodowa, bezstronność, obiektywne podejście, metodyka i odpowiednie procedury); (iv) relacje z użytkownikami (tj. istotność i dostępność informacji).

9 Umowy nr 1, 2, 3, 4 i 5.

10 Umowy nr 2, 5, 13, 14, 23 i 24.

11 Wskaźnik 2 z umowy nr 20, wskaźnik 1.2 z umowy nr 6, wskaźnik 5 z umowy nr 1 oraz wskaźniki 2.1 i 2.2 z umowy nr 16.

12 Wskaźniki 5, 6 i 8 z umowy nr 23, wskaźnik 6.2 z umowy nr 24 oraz wskaźnik 1.7 z umowy nr 6.

13 Wskaźniki 3 i 6 z umowy nr 22 oraz wskaźniki 1.2 oraz 3 z umowy nr 5.

Harmonogram

Wydarzenie Data
Zatwierdzenie ramowego programu kontroli (APM) / rozpoczęcie kontroli 20.11.2018
Oficjalne przesłanie wstępnej wersji sprawozdania Komisji
(lub innej jednostce kontrolowanej)
20.9.2019
Przyjęcie ostatecznej wersji sprawozdania po postępowaniu kontradyktoryjnym 12.11.2019
Otrzymanie oficjalnych odpowiedzi Komisji (lub innej jednostki kontrolowanej) we wszystkich językach 5.12.2019

Kontakt

EUROPEJSKI TRYBUNAŁ OBRACHUNKOWY
12, rue Alcide De Gasperi
1615 Luxembourg
LUKSEMBURG

Tel. +352 4398-1
Formularz kontaktowy: eca.europa.eu/pl/Pages/ContactForm.aspx
Strona internetowa: eca.europa.eu
Twitter: @EUAuditors

Więcej informacji o Unii Europejskiej można znaleźć w portalu Europa (http://europa.eu).

Luksemburg: Urząd Publikacji Unii Europejskiej, 2019

PDF ISBN 978-92-847-4051-2 ISSN 1977-5768 doi:10.2865/276268 QJ-AB-19-023-PL-N
HTML ISBN 978-92-847-4072-7 ISSN 1977-5768 doi:10.2865/260894 QJ-AB-19-023-PL-Q

© Unia Europejska, 2019

Kopiowanie dozwolone pod warunkiem podania źródła.
Wykorzystywanie lub powielanie zdjęć i innych materiałów, co do których Unia Europejska nie przysługują prawa autorskie, wymaga bezpośredniej zgody właściciela praw.

JAK SKONTAKTOWAĆ SIĘ Z UE

Osobiście
W całej Unii Europejskiej istnieje kilkaset centrów informacyjnych Europe Direct. Adres najbliższego centrum można znaleźć na stronie: https://europa.eu/european-union/contact_pl.

Telefonicznie lub drogą mailową
Europe Direct to serwis informacyjny, który udziela odpowiedzi na pytania na temat Unii Europejskiej. Można się z nim skontaktować:

  • dzwoniąc pod bezpłatny numer telefonu: 00 800 6 7 8 9 10 11 (niektórzy operatorzy mogą naliczać opłaty za te połączenia),
  • dzwoniąc pod standardowy numer telefonu: +32 22999696,
  • drogą mailową: https://europa.eu/european-union/contact_pl.

WYSZUKIWANIE INFORMACJI O UE

Online
Informacje o Unii Europejskiej są dostępne we wszystkich językach urzędowych UE w portalu Europa: https://europa.eu/european-union/index_pl.

Publikacje UE
Bezpłatne i odpłatne publikacje UE można pobrać lub zamówić na stronie: https://op.europa.eu/pl/publications. Większą liczbę egzemplarzy bezpłatnych publikacji można otrzymać, kontaktując się z serwisem Europe Direct lub z lokalnym centrum informacyjnym (zob. https://europa.eu/european-union/contact_pl).

Prawo UE i powiązane dokumenty
Informacje prawne dotyczące UE, w tym wszystkie unijne akty prawne od 1952 r., są dostępne we wszystkich językach urzędowych UE w portalu EUR-Lex: http://eur-lex.europa.eu.

Portal Otwartych Danych UE
Unijny portal otwartych danych (http://data.europa.eu/euodp/pl) umożliwia dostęp do zbiorów danych pochodzących z instytucji i innych organów UE. Dane można pobierać i wykorzystywać bezpłatnie, zarówno do celów komercyjnych, jak i niekomercyjnych.