blic Disclosure Authorized
Public Disclosure Authorized
Public Disclosure Authorized
Public Disclosure Authorized
Д Е П А Р ТА М Е Н Т О Ц Е Н К И О П Е РА Ц И Й В С Е М И Р Н О ГО
Б А Н К А РА З В И Т И Е В О З М О Ж Н О С Т Е Й О Ц Е Н К И
24614
ÌÎÍÈÒÎÐÈÍÃ È ÎÖÅÍÊÀ Íåêîòîðûå èíñòðóìåíòû, ìåòîäû è ïîäõîäû
OED EOD
ÌÎÍÈÒÎÐÈÍÃ È ÎÖÅÍÊÀ Íåêîòîðûå èíñòðóìåíòû, ìåòîäû è ïîäõîäû
ВСЕМИРНЫЙ БАНК Вашингтон, округ Колумбия www.worldbank.org/oed/ecd/
2
ÂÛÐÀÆÅÍÈÿ
ÏÐÈÇÍÀÒÅËÜÍÎÑÒÈ
Ïåðâîå èçäàíèå äàííîãî îò÷åòà áûëî ïîäãîòîâëåíî Ìýðè Êëàðê è Ðîëüôîì Ñàðòîðèóñîì (ñîöèàëüíûé ýôôåêò). Âûðàæàåì áîëüøóþ ïðèçíàòåëüíîñòü ñïåöèàëèñòàì Âñåìèðíîãî áàíêà, êîòîðûå âíåñëè çíà÷èòåëüíûé âêëàä â ïîäãîòîâêó îò÷åòà, âêëþ÷àÿ Ôðàíñóà Áèíäåðà, Îñâàëüäî Ôàéíøòåéíà, Ðîííè Õàììàäà, Äæîäè Êüþñàê, Ëèíäó Ìîðà, Ðèòâà Ðåéíèêêà, Ãëîðèþ Ðóáèî è Ýëèçàáåò Óàéò. Äàííîå âòîðîå èçäàíèå âêëþ÷àåò ðåçóëüòàòû ðàñøèðåííîãî îáñóæäåíèÿ îöåíêè ýôôåêòîâ, ïîäãîòîâëåííîãî Ìàéêëîì Áàìáåðãåðîì (êîíñóëüòàíòîì). Ðóêîâîäèòåëåì çàäàíèÿ ïî îêîí÷àòåëüíîé äîðàáîòêå äàííîãî îò÷åòà ÿâëÿëñÿ Êèò Ìàêýé.
Copyright © 2004 Ìåæäyíapoäíûé áàíê ðåêîíñòðóêöèè è ðàçâèòèÿ/ÂÑÅÌÈÐÍÛÉ ÁÀÍÊ 1818 H Street, N.W. Washington, D.C. 20433, U.S.A. Âñå ïðàâà çàùèùåíû. Ïðîèçâåäåíî â Ñîåäèíåííûõ Øòàòàõ Àìåðèêè. Ìíåíèÿ, âûðàæåííûå â äàííîì îò÷åòå, íå îáÿçàòåëüíî ïðåäñòàâëÿþò âçãëÿäû Âñåìèðíîãî áàíêà èëè ñòðàí, êîòîðûå ÿâëÿþòñÿ åãî ÷ëåíàìè. Âñåìèðíûé áàíê íå ãàðàíòèðóåò òî÷íîñòü äàííûõ, âêëþ÷åííûõ â äàííóþ ïóáëèêàöèþ, è íå íåñåò îòâåòñòâåííîñòè çà êàêèå-ëèáî ïîñëåäñòâèÿ èõ èñïîëüçîâàíèÿ. Ãðàíèöû, öâåòà, íàçâàíèÿ è èíàÿ èíôîðìàöèÿ, ïîêàçàííàÿ íà êàêèõ-ëèáî êàðòàõ â äàííîì òîìå, íå âûðàæàåò ìíåíèå Ãðóïïû Âñåìèðíîãî áàíêà îòíîñèòåëüíî ïðàâîâîãî ñòàòóñà òåððèòîðèé ëèáî îäîáðåíèå èëè ïðèíÿòèå òàêèõ ãðàíèö.
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
ÑÎÄÅÐÆÀÍÈÅ Îáçîð Ì&Î .................................................................. 5 Ïîêàçàòåëè ðåçóëüòàòèâíîñòè ...................................... 6 Ïîäõîä íà ëîãè÷åñêîé îñíîâå..................................... 8 Îöåíêà íà îñíîâå òåîðèè ........................................10 Îôèöèàëüíûå îáñëåäîâàíèÿ ........................................12 Ìåòîäû áûñòðîé îöåíêè ...........................................15 Ìåòîäû ñîâìåñòíîé ðàáîòû .......................................17 Îáñëåäîâàíèÿ ïî îòñëåæèâàíèþ ãîñóäàðñòâåííûõ ðàñõîäîâ ..........................................19 Àíàëèç çàòðàò è ðåçóëüòàòîâ è àíàëèç ýêîíîìè÷åñêîé ýôôåêòèâíîñòè ...............................21 Îöåíêà ýôôåêòîâ........................................................23 Äîïîëíèòåëüíûå ðåñóðñû ïî ìîíèòîðèíãó è îöåíêå .......................................................................28
3
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
5 Îáçîð Ì&Î ÍÅÊÎÒÎÐÛÅ ÈÍÑÒÐÓÌÅÍÒÛ, ÌÅÒÎÄÛ È ÏÎÄÕÎÄÛ Ê ÏÐÎÂÅÄÅÍÈÞ ÌÎÍÈÒÎÐÈÍÃÀ È ÎÖÅÍÊÈ
ÖÅËÜ
Ìîíèòîðèíã è îöåíêà (Ì&Î) äåÿòåëüíîñòè â îáëàñòè ðàçâèòèÿ ïðåäîñòàâëÿåò ãîñóäàðñòâåííûì ÷èíîâíèêàì, ìåíåäæåðàì ïî ðàçâèòèþ è ïðåäñòàâèòåëÿì ãðàæäàíñêîãî îáùåñòâà ëó÷øèå ñïîñîáû îáó÷åíèÿ íà îñíîâå îïûòà ïðîøëûõ ëåò, óëó÷øåíèÿ êà÷åñòâà ïðåäîñòàâëÿåìûõ óñëóã, ïëàíèðîâàíèÿ è ðàñïðåäåëåíèÿ ðåñóðñîâ, à òàêæå äåìîíñòðàöèè ðåçóëüòàòîâ â ðàìêàõ îòâåòñòâåííîñòè êëþ÷åâûõ ó÷àñòíèêîâ.  ðàçâèâàþùåìñÿ îáùåñòâå áîëüøîå âíèìàíèå óäåëÿåòñÿ ðåçóëüòàòàì – ýòî ïîìîãàåò îáúÿñíèòü ðàñòóùèé èíòåðåñ ê Ì&Î. Òåì íå ìåíåå, çà÷àñòóþ âîçíèêàåò ïóòàíèöà îòíîñèòåëüíî òîãî, ÷òî âõîäèò â Ì&Î. Öåëüþ Îáçîðà Ì&Î ÿâëÿåòñÿ ðàñøèðåíèå èíôîðìèðîâàííîñòè è èíòåðåñà ê Ì&Î, à òàêæå ðàçúÿñíåíèå òîãî, ÷òî ïîä ýòèì ïîäðàçóìåâàåòñÿ.  äàííîé ðàáîòå Âàøåìó âíèìàíèþ ïðåäëàãàåòñÿ îáçîð ïðèìåðîâ, ìåòîäîâ è ïîäõîäîâ Ì&Î, âêëþ÷àÿ èõ öåëü è èñïîëüçîâàíèå; íåîáõîäèìûå çàòðàòû, íàâûêè è âðåìÿ; à òàêæå êëþ÷åâûå ðåñóðñû.  ðàáîòå ïðîèëëþñòðèðîâàíû ìåòîäû ñáîðà äàííûõ, àíàëèòè÷åñêèå îñíîâû, à òàêæå òèïû îöåíêè è èçó÷åíèÿ.  ðàçäåëå Îáçîð Ì&Î îáñóæäàåòñÿ ñëåäóþùåå: Ïîêàçàòåëè ðåçóëüòàòèâíîñòè Ïîäõîä íà ëîãè÷åñêîé îñíîâå Îöåíêà íà îñíîâå òåîðèè Îôèöèàëüíûå îáñëåäîâàíèÿ Ìåòîäû áûñòðîé îöåíêè Ìåòîäû ñîâìåñòíîé ðàáîòû Îáñëåäîâàíèÿ ïî îòñëåæèâàíèþ ãîñóäàðñòâåííûõ ðàñõîäîâ Àíàëèç çàòðàò è ðåçóëüòàòîâ è àíàëèç ýêîíîìè÷åñêîé ýôôåêòèâíîñòè Îöåíêà ýôôåêòà Äàííûé ñïèñîê íå ÿâëÿåòñÿ è íå äîëæåí áûòü èñ÷åðïûâàþùèì. Íåêîòîðûå èç ïåðå÷èñëåííûõ çäåñü ìåòîäîâ è ïîäõîäîâ ÿâëÿþòñÿ äîïîëíèòåëüíûìè; íåêîòîðûå æå ïðèìåíÿþòñÿ äëÿ çàìåíû äðóãèõ. Îäíè èìåþò øèðîêóþ ñôåðó ïðèìåíåíèÿ, òîãäà êàê ïðèìåíåíèå äðóãèõ äîñòàòî÷íî îãðàíè÷åííî. Âûáîð òîãî, êàêèå ìåòîäû ïðèìåíÿòü â îïðåäåëåííûõ óñëîâèÿõ, áóäåò çàâèñåòü îò ðÿäà ñîîáðàæåíèé. Ê íèì îòíîñÿòñÿ ñôåðû, â êîòîðûõ ïðåäïîëàãàåòñÿ èñïîëüçîâàòü Ì&Î, îñíîâíûå ó÷àñòíèêè, çàèíòåðåñîâàííûå â ðåçóëüòàòàõ Ì&Î, ñðî÷íîñòü ïîòðåáíîñòè â èíôîðìàöèè, à òàêæå ñòîèìîñòü.
6
Ïîêàçàòåëè ðåçóëüòàòèâíîñòè ×òî ýòî òàêîå? Ïîêàçàòåëè ðåçóëüòàòèâíîñòè – ýòî ïîêàçàòåëè èñõîäíûõ çàòðàò, ïðîöåññîâ, ïðîäóêòîâ, ðåçóëüòàòîâ è ýôôåêòîâ ïðîåêòîâ, ïðîãðàìì èëè ñòðàòåãèé ðàçâèòèÿ. Åñëè îíè ñîïðîâîæäàþòñÿ ñáîðîì îñíîâàòåëüíûõ äàííûõ, – äëÿ ÷åãî, âîçìîæíî, ïîòðåáóåòñÿ ïðîâåäåíèå îôèöèàëüíîãî îáñëåäîâàíèÿ – àíàëèçîì è îò÷åòíîñòüþ, òî òàêèå ïîêàçàòåëè ìîãóò äàòü âîçìîæíîñòü ìåíåäæåðàì îòñëåæèâàòü ïðîäâèæåíèå, ïîêàçûâàòü ðåçóëüòàòû è ïðèíèìàòü êîððåêòèðóþùèå ìåðû äëÿ óëó÷øåíèÿ ïðåäîñòàâëåíèÿ óñëóã. Âàæíî, ÷òîáû â îïðåäåëåíèè ïîêàçàòåëåé ïðèíèìàëè ó÷àñòèå êëþ÷åâûå ëèöà, òàê êàê â òàêîì ñëó÷àå îíè ñêîðåå âîñïðèìóò è áóäóò ïðèìåíÿòü ïîêàçàòåëè äëÿ óïðàâëåíèÿ ïðîöåññîì ïðèíÿòèÿ ðåøåíèé.
Äëÿ ÷åãî ìû ìîæåì èõ èñïîëüçîâàòü? Ïëàíèðîâàíèå ïîêàçàòåëåé ðåçóëüòàòèâíîñòè è îöåíêà óñïåõà èõ äîñòèæåíèÿ. Âûÿâëåíèå ïðîáëåì ïðè ïîìîùè ñèñòåìû ðàííåãî ïðåäóïðåæäåíèÿ, ÷òî ïîçâîëÿåò ïðèíÿòü êîððåêòèðóþùèå ìåðû. Óêàçàíèå òîãî, íóæíà ëè ãëóáîêàÿ îöåíêà èëè èçó÷åíèå. ÏÐÅÈÌÓÙÅÑÒÂÀ: Ýôôåêòèâíûå ìåòîäû îïðåäåëåíèÿ óñïåøíîãî âûïîëíåíèÿ çàäà÷. Ïðîâîäèò êîíòðîëüíûå ñðàâíåíèÿ ìåæäó ðàçëè÷íûìè îðãàíèçàöèîííûìè åäèíèöàìè è îáëàñòÿìè â ðàçðåçå âðåìåíè. ÍÅÄÎÑÒÀÒÊÈ: Ñëàáî îïðåäåëåííûå ïîêàçàòåëè íå ÿâëÿþòñÿ õîðîøèì ìåðèëîì óñïåõà. Òåíäåíöèÿ ê îïðåäåëåíèþ ñëèøêîì ìíîãèõ ïîêàçàòåëåé, ëèáî æå áåç äîñòóïà ê èñòî÷íèêàì äàííûõ äåëàåò ñèñòåìó äîðîãîñòîÿùåé, íåïðàêòè÷íîé è íå ïîëíîñòüþ èñïîëüçîâàííîé. Çà÷àñòóþ ñóùåñòâóåò êîìïðîìèññ ìåæäó âûáîðîì îïòèìàëüíûõ èëè æåëàòåëüíûõ ïîêàçàòåëåé è íåîáõîäèìîñòüþ ïðèíÿòü ïîêàçàòåëè, êîòîðûå ìîæíî îïðåäåëèòü ñ èñïîëüçîâàíèåì ñóùåñòâóþùèõ äàííûõ.
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
7
ÑÒÎÈÌÎÑÒÜ: Ìîæåò âàðüèðîâàòüñÿ îò íèçêîé äî âûñîêîé â çàâèñèìîñòè îò êîëè÷åñòâà ñîáðàííûõ ïîêàçàòåëåé, ïåðèîäè÷íîñòè è êà÷åñòâà íåîáõîäèìîé èíôîðìàöèè, à òàêæå ïîëíîòû ñèñòåìû. ÍÅÎÁÕÎÄÈÌÛÅ ÍÀÂÛÊÈ: Äëÿ ðàçâèòèÿ íàâûêîâ îïðåäåëåíèÿ ïðàêòè÷åñêèõ ïîêàçàòåëåé ðåêîìåíäóåòñÿ íåñêîëüêî äíåé îáó÷åíèÿ. Äëÿ âíåäðåíèÿ ñèñòåì ìîíèòîðèíãà ðåçóëüòàòèâíîñòè íåîáõîäèìû íàâûêè ñáîðà äàííûõ, àíàëèçà è îò÷åòíîñòè, à òàêæå ðàáîòû ñ ñèñòåìîé èíôîðìàöèè ïî óïðàâëåíèþ (MIS). ÍÅÎÁÕÎÄÈÌÎÅ ÂÐÅÌß: Îò íåñêîëüêèõ äíåé äî íåñêîëüêèõ ìåñÿöåâ â çàâèñèìîñòè îò ñòåïåíè àêòèâíîãî ïðîöåññà, ïðèìåíÿåìîãî äëÿ îïðåäåëåíèÿ ïîêàçàòåëåé è ñëîæíîñòè ïðîãðàììû. Âíåäðåíèå ñèñòåì ìîíèòîðèíãà ðåçóëüòàòèâíîñòè ìîæåò ïðîäëèòüñÿ 6-12 ìåñÿöåâ.
ÄËß ÁÎËÅÅ ÏÎÄÐÎÁÍÎÉ ÈÍÔÎÐÌÀÖÈÈ: Âñåìèðíûé áàíê (2000). Ñïðàâî÷íèê êëþ÷åâûõ ïîêàçàòåëåé ðåçóëüòàòèâíîñòè. Âàøèíãòîí, îêðóã Êîëóìáèÿ. Õàòðè, Õ. (1999). Îïðåäåëåíèå ðåçóëüòàòèâíîñòè: Ïîëó÷åíèå ðåçóëüòàòîâ. Óðáàí Èíñòèòóò, Âàøèíãòîí, îêðóã Êîëóìáèÿ.
8
Ïîäõîä íà ëîãè÷åñêîé îñíîâå ×òî ýòî òàêîå? Ïîäõîä íà ëîãè÷åñêîé îñíîâå (LogFrame) ïîìîãàåò ðàçúÿñíÿòü çàäà÷è ïðîåêòà, ïðîãðàììû èëè ïîëèòèêè. Îí òàêæå îêàçûâàåò ïîìîùü â îïðåäåëåíèè îæèäàåìûõ ñëó÷àéíûõ ñâÿçåé – «ëîãèêè ïðîãðàììû» – â ñëåäóþùåé ïîñëåäîâàòåëüíîñòè ïîëó÷åíèÿ ðåçóëüòàòîâ: èñõîäíûå çàòðàòû, ïðîöåññû, ïðîäóêòû, (âêëþ÷àÿ îõâàò ãðóïï áåíåôèöèàðèåâ), ðåçóëüòàòû è ýôôåêòû. Îí ïðèâîäèò ê îïðåäåëåíèþ ïîêàçàòåëåé ðåçóëüòàòèâíîñòè íà êàæäîì ýòàïå äàííîé ïîñëåäîâàòåëüíîñòè, à òàêæå ðèñêîâ, êîòîðûå ìîãóò ïðåïÿòñòâîâàòü âûïîëíåíèþ çàäà÷. Ïîäõîä LogFrame òàêæå ÿâëÿåòñÿ èíñòðóìåíòîì îðãàíèçàöèè ïàðòíåðîâ ñ öåëüþ ðàçúÿñíåíèÿ çàäà÷ èëè ïîñòðîåíèÿ ðàáîòû. Íà ýòàïå ðåàëèçàöèè LogFrame ÿâëÿåòñÿ ïîëåçíûì èíñòðóìåíòîì îïðåäåëåíèÿ ïðîãðåññà è ïðèíÿòèÿ êîððåêòèðóþùèõ ìåð.
Äëÿ ÷åãî ìû ìîæåì èñïîëüçîâàòü ýòîò ïîäõîä? Óëó÷øåíèå êà÷åñòâà ïîñòðîåíèÿ ïðîåêòà è ïðîãðàììû çà ñ÷åò áîëåå ÷åòêîãî îïðåäåëåíèÿ çàäà÷, èñïîëüçîâàíèÿ ïîêàçàòåëåé ðåçóëüòàòèâíîñòè è îöåíêè ðèñêîâ. Ïîäâåäåíèå èòîãîâ êîìïëåêñíûõ äåéñòâèé. Ïîìîùü â ïîäãîòîâêå äåòàëüíûõ ïëàíîâ ðàáîòû. Îáåñïå÷åíèå îáúåêòèâíîé îñíîâû äëÿ ïðîâåðêè, ìîíèòîðèíãà è îöåíêè äåéñòâèé. ÏÐÅÈÌÓÙÅÑÒÂÀ: Ñïîñîáñòâóåò òîìó, ÷òîáû ëèöà, îòâåòñòâåííûå çà ïðèíÿòèå ðåøåíèé, çàäàâàëè âñåñòîðîííèå âîïðîñû è àíàëèçèðîâàëè ïðåäïîëîæåíèÿ è ðèñêè. Îðãàíèçóåò îñíîâíûõ ó÷àñòíèêîâ â ïðîöåññå ïëàíèðîâàíèÿ è ìîíèòîðèíãà. Ïðè äèíàìè÷íîì èñïîëüçîâàíèè ýòî ÿâëÿåòñÿ ýôôåêòèâíûì èíñòðóìåíòîì óïðàâëåíèÿ äëÿ ïðîöåññîâ ðåàëèçàöèè, ìîíèòîðèíãà è îöåíêè.
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
9
ÍÅÄÎÑÒÀÒÊÈ: Ïðè æåñòêîì óïðàâëåíèè ïîäàâëÿåò òâîð÷åñêèé è èííîâàöèîííûé ïîäõîä. Åñëè íå îáíîâëÿòü â õîäå ðåàëèçàöèè, òî ýòîò èíñòðóìåíò ìîæåò áûòü íåäèíàìè÷íûì, ÷òî íå ïîçâîëèò åìó îòðàæàòü èçìåíÿþùèåñÿ óñëîâèÿ. Çà÷àñòóþ íåîáõîäèìû îáó÷åíèå è äîðàáîòêà. ÑÒÎÈÌÎÑÒÜ: Îò íèçêîé äî ñðåäíåé â çàâèñèìîñòè îò ñòåïåíè è ãëóáèíû àêòèâíîãî ïðîöåññà, èñïîëüçóåìîãî äëÿ ïîääåðæêè äàííîãî ïîäõîäà. ÍÅÎÁÕÎÄÈÌÛÅ ÍÀÂÛÊÈ: Ìèíèìóì 3-5 äíåé îáó÷åíèÿ äëÿ îðãàíèçàòîðîâ; äîïîëíèòåëüíûå îðãàíèçàöèîííûå íàâûêè íåîáõîäèìû äëÿ îñóùåñòâëåíèÿ ñîâìåñòíîãî ïëàíèðîâàíèÿ è óïðàâëåíèÿ. ÍÅÎÁÕÎÄÈÌÎÅ ÂÐÅÌß: Îò íåñêîëüêèõ äíåé äî íåñêîëüêèõ ìåñÿöåâ â çàâèñèìîñòè îò îõâàòà è ãëóáèíû àêòèâíîãî ïðîöåññà.
ÄËß ÁÎËÅÅ ÏÎÄÐÎÁÍÎÉ ÈÍÔÎÐÌÀÖÈÈ: Âñåìèðíûé áàíê (2000). Ñïðàâî÷íèê ïî ïîäõîäó íà ëîãè÷åñêîé îñíîâå (Logframe), Âñåìèðíûé áàíê: http://wbln1023/OCS/Quality.nsf/Main/ MELFHandBook/$File/LFhandbook.pdf GTZ (1997). ZOPP: Ïëàíèðîâàíèå ïðîåêòà ñ ó÷åòîì çàäà÷: http:// www.unhabitat.org/cdrom/governance/html/books/zopp_e.pdf
10
Îöåíêà íà îñíîâå òåîðèè ×òî ýòî òàêîå? Îöåíêà íà îñíîâå òåîðèè èìååò ñõîæèå ÷åðòû ñ ïîäõîäîì LogFrame, íî îíà äàåò áîëåå äåòàëüíîå ïîíèìàíèå ïðîöåññîâ ïðîãðàììû èëè äåÿòåëüíîñòè – «òåîðèÿ ïðîãðàììû» èëè «ëîãèêà ïðîãðàììû».  ÷àñòíîñòè, äëÿ ýòîãî íå íóæíû äîïóùåíèÿ î ïðîñòûõ ëèíåéíûõ ïðè÷èííî-ñëåäñòâåííûõ ñâÿçÿõ. Íàïðèìåð, óñïåõ ãîñóäàðñòâåííîé ïðîãðàììû ïî ïîâûøåíèþ óðîâíÿ ãðàìîòíîñòè çà ñ÷åò óâåëè÷åíèÿ ÷èñëåííîñòè ó÷èòåëåé ìîæåò çàâèñåòü îò ðÿäà ôàêòîðîâ. Ê íèì îòíîñÿòñÿ íàëè÷èå àóäèòîðèé è ó÷åáíèêîâ, âîçìîæíûå ðåàêöèè ðîäèòåëåé, äèðåêòîðîâ øêîë è ó÷åíèêîâ, íàâûêè è ìîðàëüíûå íîðìû ó÷èòåëåé, ðàéîíû, êóäà áóäóò íàïðàâëåíû äîïîëíèòåëüíî âûäåëåííûå ó÷èòåëÿ, íàäåæíîñòü ãîñóäàðñòâåííîãî ôèíàíñèðîâàíèÿ è ò.ä. Îïðåäåëÿÿ îñíîâîïîëàãàþùèå èëè ñëó÷àéíûå ôàêòîðû, çíà÷èìûå äëÿ äîñòèæåíèÿ óñïåõà, à òàêæå ñïîñîáû èõ âçàèìîäåéñòâèÿ, ìîæíî ïðèíÿòü ðåøåíèÿ î òîì, êàêèå ýòàïû íåîáõîäèìî îòñëåæèâàòü ïî ìåðå ðàçâèòèÿ ïðîãðàììû äëÿ òîãî, ÷òîáû óâèäåòü, êàê æå îíè íà ñàìîì äåëå ïîäòâåðæäåíû. È åñëè äàííûå ïîêàçûâàþò, ÷òî ýòè ôàêòîðû íå äîñòèãíóòû, òî ìîæíî ïðèéòè ê îáîñíîâàííîìó âûâîäó î ìàëîâåðîÿòíîñòè òîãî, ÷òî ïðîãðàììà óñïåøíî âûïîëíèò ïîñòàâëåííûå çàäà÷è.
Äëÿ ÷åãî ìû ìîæåì åå ïðèìåíÿòü? Ïëàíèðîâàíèå êîìïëåêñíûõ äåéñòâèé. Óëó÷øåíèå ïëàíèðîâàíèÿ è óïðàâëåíèÿ. ÏÐÅÈÌÓÙÅÑÒÂÀ: Ïðåäîñòàâëÿåò íà íà÷àëüíîì ýòàïå îáðàòíóþ èíôîðìàöèþ îòíîñèòåëüíî òîãî, ÷òî ðàáîòàåò, à ÷òî íåò, è ïî÷åìó. Ïîçâîëÿåò íà íà÷àëüíîì ýòàïå ïðèíèìàòü ìåðû ïî óñòðàíåíèþ ïðîáëåì ïî ìåðå èõ âîçíèêíîâåíèÿ. Ïîìîãàåò â îïðåäåëåíèè íåóìûøëåííûõ ïîáî÷íûõ ýôôåêòîâ ïðîãðàììû. Ïîìîãàåò îïðåäåëÿòü ïðèîðèòåòíîñòü òîãî, êàêèå âîïðîñû íåîáõîäèìî áîëåå ãëóáîêî èññëåäîâàòü, âîçìîæíî, ñ èñïîëüçîâàíèåì áîëåå ñêîíöåíòðèðîâàííîãî ñáîðà äàííûõ èëè áîëåå ñëîæíûõ ìåòîäîâ Ì&Î. Îáåñïå÷èâàåò îñíîâó äëÿ îöåíêè âîçìîæíûõ ýôôåêòîâ ïðîãðàìì.
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
11
ÍÅÄÎÑÒÀÒÊÈ: Ìîæåò ëåãêî ñòàòü ÷ðåçìåðíî ñëîæíîé ïðè êðóïíîì ìàñøòàáå äåÿòåëüíîñòè èëè ïðè ñáîðå âñåñòîðîííåãî ñïèñêà ôàêòîðîâ è ïðåäïîëîæåíèé. Ó÷àñòíèêè ìîãóò íå ñîãëàñèòüñÿ îòíîñèòåëüíî òîãî, êàêèå îñíîâîïîëàãàþùèå ôàêòîðû, ïî èõ ìíåíèþ, ÿâëÿþòñÿ âàæíûìè, ÷òî ìîæåò îòíÿòü ìíîãî âðåìåíè. ÑÒÎÈÌÎÑÒÜ: Ñðåäíÿÿ – â çàâèñèìîñòè îò ãëóáèíû àíàëèçà è îñîáåííî äåòàëèçàöèè ñîáèðàåìûõ äàííûõ, êîòîðûå íåîáõîäèìû äëÿ èçó÷åíèÿ ïðîöåññà ïðîãðàììû. ÍÅÎÁÕÎÄÈÌÛÅ ÍÀÂÛÊÈ: Ìèíèìóì 3-5 äíåé îáó÷åíèÿ äëÿ îðãàíèçàòîðîâ. ÍÅÎÁÕÎÄÈÌÎÅ ÂÐÅÌß: Ìîæåò ñóùåñòâåííî âàðüèðîâàòüñÿ â çàâèñèìîñòè îò ãëóáèíû àíàëèçà, ïðîäîëæèòåëüíîñòè ïðîãðàììû èëè äåÿòåëüíîñòè, à òàêæå îõâàòà ðàáîòû ïî Ì&Î.
ÄËß ÁÎËÅÅ ÏÎÄÐÎÁÍÎÉ ÈÍÔÎÐÌÀÖÈÈ: Âàéñ, Êýðîë Õ. (1998). Îöåíêà. Ïðåíòèñ Õîëë, Íüþ-Äæåðñè, Âòîðîå èçäàíèå. Âàéñ, Êýðîë Õ. (2000). «Îöåíêà íà îñíîâå òåîðèè: òåîðèè èçìåíåíèé äëÿ ïðîãðàìì ïî ñîêðàùåíèþ óðîâíÿ áåäíîñòè.»  ñáîðíèêå Î. Ôàéíøòåéíà è Ð. Ïè÷÷èîòòî (àâò.), Îöåíêà è ñîêðàùåíèå óðîâíÿ áåäíîñòè. Äåïàðòàìåíò îöåíêè îïåðàöèé. Âñåìèðíûé áàíê. Âàøèíãòîí, îêðóã Êîëóìáèÿ. Ìýéí, Äæîí (1999). Ðàññìîòðåíèå ïðèìåíèìîñòè ñ òî÷êè çðåíèÿ àíàëèçà âêëàäà: Ðàçóìíîå èñïîëüçîâàíèå ïîêàçàòåëåé ðåçóëüòàòèâíîñòè. Ðàáî÷èé äîêëàä Îôèñà Ãëàâíîãî àóäèòîðà Êàíàäû, Îòòàâà: http://www.oagbvg.gc.ca/domino/other.nsf/html/99dp1 _e.htmI
12
Îôèöèàëüíûå îáñëåäîâàíèÿ ×òî ýòî òàêîå? Ôîðìàëüíûå èññëåäîâàíèÿ ìîæíî èñïîëüçîâàòü äëÿ ñáîðà ñòàíäàðòèçèðîâàííîé èíôîðìàöèè îò òùàòåëüíî îòîáðàííûõ ãðóïï íàñåëåíèÿ èëè ñåìåé. Çà÷àñòóþ îáñëåäîâàíèÿ ñîáèðàþò ñîïîñòàâèìóþ èíôîðìàöèþ ïî îòíîñèòåëüíî áîëüøîé ÷èñëåííîñòè ëþäåé â îïðåäåëåííûõ öåëåâûõ ãðóïïàõ.
Äëÿ ÷åãî îíè èñïîëüçóþòñÿ? Ïðåäîñòàâëåíèå áàçîâûõ äàííûõ, îòíîñèòåëüíî êîòîðûõ ìîæíî ñðàâíèâàòü ðåçóëüòàòû ñòðàòåãèè, ïðîãðàììû èëè ïðîåêòà. Ñðàâíåíèå ðàçëè÷íûõ ãðóïï â îïðåäåëåííûé ìîìåíò âðåìåíè. Ñðàâíåíèå èçìåíåíèé ñ òå÷åíèåì âðåìåíè â îäíîé ãðóïïå. Ñðàâíåíèå ôàêòè÷åñêèõ óñëîâèé ñ çàïëàíèðîâàííûìè ïîêàçàòåëÿìè ïðîãðàììû èëè ïðîåêòà. Îïèñàíèå óñëîâèé â îïðåäåëåííîì ñîîáùåñòâå èëè ãðóïïå. Ïðåäîñòàâëåíèå êëþ÷åâûõ èñõîäíûõ äàííûõ äëÿ îôèöèàëüíîé îöåíêè ýôôåêòà ïðîãðàììû èëè ïðîåêòà. Îöåíêà óðîâíåé êàê îñíîâû äëÿ ïîäãîòîâêè ñòðàòåãèé ñîêðàùåíèÿ óðîâíåé áåäíîñòè. ÏÐÅÈÌÓÙÅÑÒÂÀ: Ðåçóëüòàòû, ïîëó÷åííûå îò îïðîøåííûõ ëþäåé, ìîæíî ïðèìåíèòü ê áîëåå øèðîêîé öåëåâîé ãðóïïå èëè êî âñåìó íàñåëåíèþ â öåëîì. Ìîæíî äåëàòü êîëè÷åñòâåííûå îöåíêè ïî âåëè÷èíå è ðàñïðåäåëåíèþ ýôôåêòîâ. ÍÅÄÎÑÒÀÒÊÈ: Çà èñêëþ÷åíèåì CWTQ, ÷àñòî íåò ðåçóëüòàòîâ â òå÷åíèå äëèòåëüíîãî âðåìåíè. Äàííûå îáðàáîòêè è àíàëèçà ìîãóò áûòü îñíîâíûìè ïðåïÿòñòâèÿìè äëÿ ïðîâåäåíèÿ áîëåå êðóïíûõ îáñëåäîâàíèé äàæå ïðè íàëè÷èè êîìïüþòåðîâ. LSMS è îáñëåäîâàíèÿ ñåìåé ÿâëÿþòñÿ äîðîãîñòîÿùèìè îáñëåäîâàíèÿìè, êîòîðûå çàíèìàþò ìíîãî âðåìåíè.  õîäå îôèöèàëüíûõ îáñëåäîâàíèé ñëîæíî ïîëó÷èòü ìíîãèå âèäû èíôîðìàöèè. ÑÒÎÈÌÎÑÒÜ: Âàðüèðóåòñÿ ïðèìåðíî îò 30-60 äîëëàðîâ ÑØÀ íà ñåìüþ ïðè ïðîâåäåíèè CWIQ äî 170 äîëëàðîâ ÑØÀ íà ñåìüþ ïðè ïðîâåäåíèè LSMS. Çàòðàòû áóäóò çíà÷èòåëüíî âûøå, åñëè äëÿ ñòðàíû íåò òèïîâîãî øàáëîíà âûáîðêè.
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
13 ÍÅÎÁÕÎÄÈÌÛÅ ÍÀÂÛÊÈ: Íåîáõîäèìû çíà÷èòåëüíûå òåõíè÷åñêèå è àíàëèòè÷åñêèå íàâûêè äëÿ ïîñòðîåíèÿ îáðàçöîâ è àíêåòû, àíàëèçà è îáðàáîòêè äàííûõ. ÍÅÎÁÕÎÄÈÌÎÅ ÂÐÅÌß: Çàâèñèò îò âåëè÷èíû âûáîðêè. CWIQ ìîæíî çàâåðøèòü â òå÷åíèå 2 ìåñÿöåâ. Êàê ïðàâèëî, äëÿ ïðîâåäåíèÿ LSMS íåîáõîäèìî îò 18 ìåñÿöåâ äî 2 ëåò.
Íåêîòîðûå âèäû èññëåäîâàíèé Îáñëåäîâàíèå ñåìåé ïî ìíîãèì àñïåêòàì (êîòîðîå òàêæå íàçûâàåòñÿ Îáñëåäîâàíèåì ïî îïðåäåëåíèþ óðîâíÿ æèçíè – LSMS) – ýòî ìíîãîïðåäìåòíîå èíòåãðèðîâàííîå îáñëåäîâàíèå, êîòîðîå îáåñïå÷èâàåò ñïîñîáû ñáîðà äàííûõ ïî ðÿäó àñïåêòîâ óðîâíÿ æèçíè, íåîáõîäèìûõ äëÿ âûðàáîòêè ïîëèòèêè. Ýòè àñïåêòû îõâàòûâàþò ñëåäóþùåå: ðàñõîäû, ñîñòàâ ñåìåé, îáðàçîâàíèå, ìåäèöèíñêîå îáñëóæèâàíèå, çàíÿòîñòü, óðîâåíü ðîæäàåìîñòè, ïèòàíèå, ñáåðåæåíèÿ, ñåëüñêîõîçÿéñòâåííàÿ äåÿòåëüíîñòü è äðóãèå èñòî÷íèêè äîõîäà. Îáñëåäîâàíèå ñåìåé ïî îäíîìó àñïåêòó áîëåå ïîäðîáíî ðàññìàòðèâàåò áîëåå óçêèé êðóã âîïðîñîâ. Àíêåòà ïî îñíîâíûì ïîêàçàòåëÿì áëàãîñîñòîÿíèÿ (CWLQ) – ýòî îáñëåäîâàíèå ñåìüè, îïðåäåëÿþùåå èçìåíåíèÿ â ñîöèàëüíûõ ïîêàçàòåëÿõ äëÿ ðàçëè÷íûõ ãðóïï íàñåëåíèÿ – îñîáåííî ïîêàçàòåëè äîñòóïà è ïîëüçîâàíèÿ, à òàêæå óäîâëåòâîðåíèÿ ñîöèàëüíûìè è ýêîíîìè÷åñêèìè óñëóãàìè, Ýòî áûñòðûé è ýôôåêòèâíûé èíñòðóìåíò óëó÷øåíèÿ ïîñòðîåíèÿ äåÿòåëüíîñòè, öåëåâîé íàïðàâëåííîñòè óñëóã äëÿ áåäíûõ
êàòåãîðèé íàñåëåíèÿ, à ïðè åæåãîäíîì ïîâòîðåíèè – ìîíèòîðèíãà ðåçóëüòàòîâ äåÿòåëüíîñòè. Ïðåäâàðèòåëüíûå ðåçóëüòàòû ïî îáñëåäîâàíèþ CWIQ ìîæíî ïîëó÷èòü â òå÷åíèå 30 äíåé. Îáñëåäîâàíèå óäîâëåòâîðåíèÿ êëèåíòîâ (èëè ïðåäîñòàâëåíèÿ óñëóã) èñïîëüçóåòñÿ äëÿ îöåíêè ðåçóëüòàòèâíîñòè ãîñóäàðñòâåííûõ óñëóã íà îñíîâå îïûòà êëèåíòîâ. Îáñëåäîâàíèÿ ïðîëèâàþò ñâåò íà ïðåïÿòñòâèÿ, ñ êîòîðûìè ñòàëêèâàåòñÿ êëèåíò â îöåíêå ãîñóäàðñòâåííûõ óñëóã, èõ ìíåíèå îòíîñèòåëüíî êà÷åñòâà è ñîîòâåòñòâèÿ óñëóã, à òàêæå ðåàêöèþ ãîñóäàðñòâåííûõ ÷èíîâíèêîâ. Òàêèå îáñëåäîâàíèÿ îáû÷íî ïðîâîäÿòñÿ ìèíèñòåðñòâàìè èëè ãîñóäàðñòâåííûìè àãåíòñòâàìè. Îáñëåäîâàíèÿ ñ èñïîëüçîâàíèåì îò÷åòíûõ êàðòî÷åê ãðàæäàí ïðîâîäèëèñü ÍÏÎ è ó÷åíûìè íåñêîëüêèõ ñòðàí. Àíàëîãè÷íî îáñëåäîâàíèÿ ïðåäîñòàâëåíèÿ óñëóã, îíè òàêæå èçó÷àëè ñòåïåíü êîððóïöèè, ñ êîòîðîé ñòàëêèâàþòñÿ îáû÷íûå ãðàæäàíå. Îòëè÷èòåëüíîé ÷åðòîé ÿâëÿåòñÿ øèðîêî ðàñïðîñòðàíÿåìàÿ ïóáëèêàöèÿ ðåçóëüòàòîâ.
14
ÄËß ÁÎËÅÅ ÏÎÄÐÎÁÍÎÉ ÈÍÔÎÐÌÀÖÈÈ: Ñàïñôîðä, Ð. (1999). Èññëåäîâàíèå îáñëåäîâàíèé. Ñåéäæ, Íüþáåððè-Ïàðê, Êàëèôîðíèÿ. Àíêåòà îñíîâíûõ ïîêàçàòåëåé áëàãîñîñòîÿíèÿ: http://www4.worldbank.org/ afr/stats/cwiq.cfm LSMS: http://www.worldbank.org/lsms/ Îáñëåäîâàíèÿ ïî óäîâëåòâîðåíèþ êëèåíòîâ: http://www4.worldbank.org/afr/ stats/wbi.cfmsds Îò÷åòíûå êàðòî÷êè ãðàæäàí: http://lnweb18.worldbank.org/ESSD/sdvext.nsf/ 60ByDocName/CitizenReportCardSurveysANoteontheConceptandMethodology/ $FILE/CRC+SD+note.pdf
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
15
Ìåòîäû áûñòðîé îöåíêè ×òî ýòî òàêîå? Áûñòðûìè ìåòîäàìè îöåíêè ÿâëÿþòñÿ áûñòðûå, íåäîðîãèå ñïîñîáû ñáîðà ìíåíèé è êîììåíòàðèåâ áåíåôèöèàðèåâ è äðóãèõ çàèíòåðåñîâàííûõ ëèö äëÿ òîãî, ÷òîáû ïðèâåñòè â ñîîòâåòñòâèå ïîòðåáíîñòè â èíôîðìàöèè ëèö, îòâåòñòâåííûõ çà ïðèíÿòèå ðåøåíèé.
Äëÿ ÷åãî ìû ìîæåì èõ ïðèìåíÿòü? Ïðåäîñòàâëåíèå áûñòðîé èíôîðìàöèè äëÿ ïðèíÿòèÿ ðåøåíèé â îáëàñòè óïðàâëåíèÿ, îñîáåííî íà óðîâíå ïðîåêòà èëè ïðîãðàììû. Îáåñïå÷åíèå êà÷åñòâåííîãî ïîíèìàíèÿ êîìïëåêñíûõ ñîöèàëüíîýêîíîìè÷åñêèõ èçìåíåíèé, èíòåðàêòèâíûõ ñîöèàëüíûõ ñèòóàöèé èëè öåííîñòåé, ìîòèâàöèé èëè ðåàêöèé ëþäåé. Îáåñïå÷åíèå êîíòåêñòà è èíòåðïðåòàöèè äëÿ êîëè÷åñòâåííûõ äàííûõ, ñîáðàííûõ áîëåå îôèöèàëüíûìè ìåòîäàìè. ÏÐÅÈÌÓÙÅÑÒÂÀ: Íèçêàÿ ñòîèìîñòü. Ìîæíî áûñòðî ïðîâåñòè. Îáåñïå÷èâàåò ãèáêîñòü ïðèìåíåíèÿ íîâûõ èäåé. ÍÅÄÎÑÒÀÒÊÈ: Êàê ïðàâèëî, ðåçóëüòàòû ñîîòâåòñòâóþò êîíêðåòíûì ñîîáùåñòâàì èëè ìåñòíîñòÿì – ïîýòîìó ñëîæíî ïðîâîäèòü îáîáùåíèÿ íà îñíîâå ïîëó÷åííûõ ðåçóëüòàòîâ. Ìåíåå öåííûå, íàäåæíûå è äîñòîâåðíûå, ÷åì îôèöèàëüíûå îáñëåäîâàíèÿ. ÑÒÎÈÌÎÑÒÜ: Îò íèçêîé äî ñðåäíåé â çàâèñèìîñòè îò ìàñøòàáà ïðèìåíÿåìûõ ìåòîäîâ. ÍÅÎÁÕÎÄÈÌÛÅ ÍÀÂÛÊÈ: Íåíàïðàâëÿþùèå èíòåðâüþ, ñîçäàíèå ãðóïï, íàáëþäåíèÿ íà ìåñòàõ, âåäåíèå çàïèñåé è áàçîâûå ñòàòèñòè÷åñêèå íàâûêè. ÍÅÎÁÕÎÄÈÌÎÅ ÂÐÅÌß: Îò ÷åòûðåõ äî øåñòè íåäåëü â çàâèñèìîñòè îò îõâàòà è ìåñòîïîëîæåíèÿ îïðàøèâàåìîãî íàñåëåíèÿ, à òàêæå êîëè÷åñòâà íàáëþäàåìûõ îáúåêòîâ.
16 Ìåòîäû áûñòðîé îöåíêè Îïðîñ êëþ÷åâûõ èíôîðìàòîðîâ – ñåðèÿ âîïðîñîâ îòêðûòîãî òèïà, çàäàâàåìûõ îòäåëüíûì ëèöàì, âûáðàííûì èç-çà èõ çíàíèÿ è îïûòà ïî èíòåðåñóþùåé òåìå. Êà÷åñòâåííûå, äåòàëüíûå è ïîëóñèñòåìàòèçèðîâàííûå èíòåðâüþ, êîòîðûå ïðîâîäÿòñÿ â ñîîòâåòñòâèè ñ ðóêîâîäñòâàìè ïî ïðîâåäåíèþ èíòåðâüþ, ñîäåðæàùèå îïðåäåëåííûå òåìû èëè âîïðîñû. Îáñóæäåíèå â ôîêóñíîé ãðóïïå – îðãàíèçîâàííîå îáñóæäåíèå â ñîñòàâå 8-12 òùàòåëüíî îòîáðàííûõ ó÷àñòíèêîâ ñ îäèíàêîâûì óðîâíåì îáðàçîâàíèÿ. Ó÷àñòíèêàìè ìîãóò áûòü áåíåôèöèàðèè èëè, íàïðèìåð, ðàáîòíèêè ïðîãðàììû. Îðãàíèçàòîð èñïîëüçóåò ðóêîâîäñòâî ïî ïðîâåäåíèþ îáñóæäåíèÿ. Îòäåëüíûé ïåðñîíàë âåäåò çàïèñè êîììåíòàðèåâ è íàáëþäåíèé. Ãðóïïîâûå îïðîñû ñîîáùåñòâà – ñåðèè âîïðîñîâ è îðãàíèçîâàííîå
îáñóæäåíèå íà âñòðå÷å, â êîòîðîé ìîãóò ïðèíÿòü ó÷àñòèå âñå ÷ëåíû ñîîáùåñòâà; èíòåðâüþåð ñîáëþäàåò ïîñëåäîâàòåëüíîñòü òùàòåëüíî ïîäãîòîâëåííîé àíêåòû. Íåïîñðåäñòâåííûå íàáëþäåíèÿ – èñïîëüçîâàíèå ôîðìû ïîäðîáíûõ íàáëþäåíèé äëÿ çàïèñè óâèäåííîãî èëè óñëûøàííîãî íà ìåñòå ïðîâåäåíèÿ ïðîãðàììû. Èíôîðìàöèÿ ìîæåò êàñàòüñÿ òåêóùåé äåÿòåëüíîñòè, ïðîöåññîâ, îáñóæäåíèé, ñîöèàëüíîãî âçàèìîäåéñòâèÿ è íàáëþäàåìûõ ðåçóëüòàòîâ. Ìèíè-îáñëåäîâàíèå ñèñòåìàòèçèðîâàííàÿ àíêåòà ñ îãðàíè÷åííûì êîëè÷åñòâîì âîïðîñîâ çàêðûòîãî òèïà, êîòîðóþ ðàñïðîñòðàíÿþò ñðåäè 50-75 ÷åëîâåê. Âûáîð ðåñïîíäåíòîâ ìîæåò áûòü ñëó÷àéíûì èëè íàìåðåííûì (îïðîñ ó÷àñòíèêîâ â òàêèõ ìåñòàõ, êàê ïîëèêëèíèêà ïðè ïðîâåäåíèè îáñëåäîâàíèÿ ìåäèöèíñêèõ óñëóã).
ÄËß ÁÎËÅÅ ÏÎÄÐÎÁÍÎÉ ÈÍÔÎÐÌÀÖÈÈ: ÞÑÀÈÄ. Ñïîñîáû ìîíèòîðèíãà è îöåíêè ðåçóëüòàòèâíîñòè, #s 2, 4, 5, 10: http://www.usaid.gov/pubs/usaid_eval/#02 Ê. Êóìàð (1993). Ìåòîäû áûñòðîé îöåíêè. Âñåìèðíûé áàíê, Âàøèíãòîí, îêðóã Êîëóìáèÿ.
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
17
Ìåòîäû ñîâìåñòíîé ðàáîòû ×òî ýòî òàêîå? Ìåòîäû ñîâìåñòíîé ðàáîòû îáåñïå÷èâàþò àêòèâíîå âîâëå÷åíèå â ïðèíÿòèå ðåøåíèé òåõ ëèö, êîòîðûå ïðèíèìàþò ó÷àñòèå â ïðîåêòå, ïðîãðàììå èëè ñòðàòåãèè è ñîçäàþò îùóùåíèå èíôîðìèðîâàííîñòè î ðåçóëüòàòàõ è ðåêîìåíäàöèÿõ Ì&Î.
Äëÿ ÷åãî ìû ìîæåì èõ ïðèìåíÿòü? Èçó÷åíèå ìåñòíûõ óñëîâèé, à òàêæå ïåðñïåêòèâ è ïðèîðèòåòîâ ìåñòíîãî íàñåëåíèÿ ñïîñîáñòâóåò áîëåå îòâåòñòâåííîìó ïîñëåäîâàòåëüíîìó ó÷àñòèþ. Îïðåäåëåíèå ïðîáëåì è èõ óñòðàíåíèå â õîäå ðåàëèçàöèè. Îöåíêà ïðîåêòà, ïðîãðàììû èëè ïîëèòèêè. Ïðåäîñòàâëåíèå çíàíèé è íàâûêîâ äëÿ îêàçàíèÿ ïîääåðæêè áåäíûì ñëîÿì íàñåëåíèÿ. ÏÐÅÈÌÓÙÅÑÒÂÀ: Ðàññìàòðèâàþò çíà÷èìûå âîïðîñû ïóòåì âîâëå÷åíèÿ êëþ÷åâûõ ó÷àñòíèêîâ â ïðîöåññ ðàçðàáîòêè. Ñîçäàþò ïàðòíåðñòâà è èíôîðìèðîâàííîñòü ìåñòíîãî íàñåëåíèÿ îòíîñèòåëüíî ïðîåêòîâ. Ðàñøèðÿþò îáó÷åíèå, âîçìîæíîñòè óïðàâëåíèÿ è íàâûêè ìåñòíîãî íàñåëåíèÿ. Ïðåäîñòàâëÿþò ñâîåâðåìåííóþ è íàäåæíóþ èíôîðìàöèþ äëÿ ïðèíÿòèÿ ðåøåíèé â îáëàñòè óïðàâëåíèÿ. ÍÅÄÎÑÒÀÒÊÈ: Èíîãäà ñ÷èòàþòñÿ ìåíåå îáúåêòèâíûìè. Çàíèìàþò ìíîãî âðåìåíè, åñëè êëþ÷åâûå ó÷àñòíèêè äåéñòâèòåëüíî çàäåéñòâîâàíû çíà÷èìûì îáðàçîì. Âîçìîæíîñòü äîìèíèðîâàíèÿ è çëîóïîòðåáëåíèÿ ñî ñòîðîíû íåêîòîðûõ ó÷àñòíèêîâ äëÿ çàùèòû ñîáñòâåííûõ èíòåðåñîâ. ÑÒÎÈÌÎÑÒÜ: Îò íèçêîé äî ñðåäíåé. Çàòðàòû â çíà÷èòåëüíîé ñòåïåíè âàðüèðóþòñÿ â çàâèñèìîñòè îò îõâàòà è ãëóáèíû ïðèìåíåíèÿ è îò òîãî, íàñêîëüêî öåíèòñÿ âêëàä ìåñòíûõ ðåñóðñîâ. ÍÅÎÁÕÎÄÈÌÛÅ ÍÀÂÛÊÈ: Îáó÷åíèå äëÿ îðãàíèçàòîðîâ, ïî êðàéíåé ìåðå, â òå÷åíèå, íåñêîëüêèõ äíåé.
18
ÍÅÎÁÕÎÄÈÌÎÅ ÂÐÅÌß:  çíà÷èòåëüíîé ñòåïåíè âàðüèðóåòñÿ â çàâèñèìîñòè îò îõâàòà è ãëóáèíû ïðèìåíåíèÿ.
Øèðîêî ðàñïðîñòðàíåííûå ìåòîäû ñîâìåñòíîé ðàáîòû Àíàëèç ó÷àñòíèêîâ – ýòî îòïðàâíàÿ òî÷êà äëÿ áîëüøåé ÷àñòè ñîâìåñòíîé ðàáîòû è ñîöèàëüíûõ îöåíîê. Îí èñïîëüçóåòñÿ äëÿ ðàçâèòèÿ ïîíèìàíèÿ âçàèìîîòíîøåíèÿ ñèë, âëèÿíèÿ è èíòåðåñîâ ðàçëè÷íûõ ëþäåé, ó÷àñòâóþùèõ â îïðåäåëåííîé äåÿòåëüíîñòè, à òàêæå äëÿ îïðåäåëåíèÿ òîãî, êòî äîëæåí ïðèíèìàòü ó÷àñòèå è êîãäà. Ñîâìåñòíàÿ ñåëüñêàÿ îöåíêà – ýòî ïîäõîä ê ïëàíèðîâàíèþ íà îñíîâå ñîâìåñòíîãî îáó÷åíèÿ ìåñòíîãî íàñåëåíèÿ, êàê ãîðîäñêîãî, òàê è ñåëüñêîãî, à òàêæå ïîñòîðîííèõ ëèö. Ýòî äàåò âîçìîæíîñòü ìåíåäæåðàì ïî ðàçâèòèþ è ìåñòíîìó íàñåëåíèþ ñîâìåñòíî îöåíèâàòü è ïëàíèðîâàòü
ñîîòâåòñòâóþùèå ìåðû, çà÷àñòóþ èñïîëüçóÿ âèçóàëüíûå ìåòîäû òàêèì îáðàçîì, ÷òîáû ìîãëè ó÷àñòâîâàòü íåãðàìîòíûå ëþäè. Îöåíêà áåíåôèöèàðèåâ âêëþ÷àåò ñèñòåìàòè÷åñêèå êîíñóëüòàöèè ñ áåíåôèöèàðèÿìè ïðîåêòà è äðóãèìè ó÷àñòíèêàìè â îïðåäåëåíèè è ðàçðàáîòêå èíèöèàòèâ ðàçâèòèÿ, îñíîâíûõ ïðåïÿòñòâèé äëÿ ó÷àñòèÿ, à òàêæå ïðåäîñòàâëåíèè îáðàòíîé ðåàêöèè ñ öåëüþ óëó÷øåíèÿ óñëóã è äåÿòåëüíîñòè. Ñîâìåñòíûé ìîíèòîðèíã è îöåíêà âêëþ÷àåò ó÷àñòíèêîâ íà ðàçëè÷íûõ óðîâíÿõ, ñîâìåñòíî ðàáîòàþùèõ íàä îïðåäåëåíèåì ïðîáëåìû, ñáîðîì è àíàëèçîì èíôîðìàöèè, à òàêæå ïîäãîòîâêîé ðåêîìåíäàöèé.
ÄËß ÁÎËÅÅ ÏÎÄÐÎÁÍÎÉ ÈÍÔÎÐÌÀÖÈÈ: Ãóèò, È. è Äæ. Ãàâåíòà (1998). Ñîâìåñòíûé ìîíèòîðèíã è îöåíêà. Èíñòèòóò èññëåäîâàíèé â îáëàñòè ðàçâèòèÿ, Ñàññåêñêèé óíèâåðñèòåò, Áðàéòîí, Âåëèêîáðèòàíèÿ: http://www.ids.ac.uk/ids/bookshop/briefs/ brief12.html http://www.worldbank.org/participation/partme.htm
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
19
Îáñëåäîâàíèÿ ïî îòñëåæèâàíèþ ãîñóäàðñòâåííûõ ðàñõîäîâ ×òî ýòî òàêîå? Îáñëåäîâàíèÿ ïî îòñëåæèâàíèþ ãîñóäàðñòâåííûõ ðàñõîäîâ (PETS) îòñëåæèâàþò ïîòîê ãîñóäàðñòâåííûõ ñðåäñòâ è îïðåäåëÿþò òî, êàêîé îáúåì ðåñóðñîâ ôàêòè÷åñêè ïîëó÷àåò öåëåâàÿ ãðóïïà. Äàííûå îáñëåäîâàíèÿ èçó÷àþò ñïîñîá, îáúåìû, à òàêæå ñðîêè ðåñóðñîâ, âûäåëÿåìûõ äëÿ ðàçëè÷íûõ óðîâíåé ãîñóäàðñòâåííîãî óïðàâëåíèÿ, îñîáåííî ñòðóêòóðàì, îòâåòñòâåííûì çà ïðåäîñòàâëåíèå ñîöèàëüíûõ óñëóã, òàêèõ êàê çäðàâîîõðàíåíèå è îáðàçîâàíèå. Çà÷àñòóþ PETS ïðîâîäÿò â ðàìêàõ áîëåå êðóïíûõ îáñëåäîâàíèé ïðåäîñòàâëåíèÿ óñëóã è ñîîòâåòñòâóþùèõ îðãàíèçàöèé, êîòîðûå êîíöåíòðèðóþò âíèìàíèå íà êà÷åñòâå óñëóã, õàðàêòåðèñòèêàõ ïðåäîñòàâëÿþùèõ óñëóãè îðãàíèçàöèé, èõ óïðàâëåíèè, ñîçäàíèè ñòèìóëîâ è ò.ä.
Äëÿ ÷åãî ìû ìîæåì èõ èñïîëüçîâàòü? Êîëè÷åñòâåííîå âûÿâëåíèå ïðîáëåì â ïðåäîñòàâëåíèè óñëóã. Ïðåäîñòàâëåíèå ïîäòâåðæäåíèé çàäåðæåê ñðåäñòâ, èõ óòå÷åê è êîððóïöèè. ÏÐÅÈÌÓÙÅÑÒÂÀ: Ñïîñîáñòâóåò îò÷åòíîñòè ïðè íàëè÷èè îãðàíè÷åííîé ôèíàíñîâîé èíôîðìàöèè. Óëó÷øàåò óïðàâëåíèå, òî÷íî îïðåäåëÿÿ ìåñòîíàõîæäåíèå áþðîêðàòè÷åñêèõ ïðåïÿòñòâèé â ïîòîêå ñðåäñòâ, íàïðàâëÿåìûõ íà ïðåäîñòàâëåíèå óñëóã. ÍÅÄÎÑÒÀÒÊÈ: Ãîñóäàðñòâåííûå àãåíòñòâà ìîãóò íåîõîòíî ïðåäîñòàâëÿòü äîñòóï ê ñâîèì áóõãàëòåðñêèì êíèãàì. Çíà÷èòåëüíàÿ ñòîèìîñòü. ÑÒÎÈÌÎÑÒÜ: Ìîæåò áûòü âûñîêîé äî òîãî, êàê áóäóò ñîçäàíû âîçìîæíîñòè äëÿ èõ ïðîâåäåíèÿ íà ãîñóäàðñòâåííîì óðîâíå. Íàïðèìåð, ïåðâîå îáñëåäîâàíèå PETS â Óãàíäå ñòîèëî 60 000 äîëëàðîâ ÑØÀ äëÿ ñåêòîðà îáðàçîâàíèÿ è 100 000 äîëëàðîâ ÑØÀ äëÿ ñåêòîðà çäðàâîîõðàíåíèÿ.
20
ÍÅÎÁÕÎÄÈÌÛÅ ÍÀÂÛÊÈ: Çíà÷èòåëüíûå òåõíè÷åñêèå è àíàëèòè÷åñêèå íàâûêè äëÿ ñáîðà äàííûõ è ðàçðàáîòêè àíêåòû, àíàëèçà è îáðàáîòêè äàííûõ, à òàêæå õîðîøåå ïîíèìàíèå ñèòóàöèè â ñåêòîðå, â êîòîðîì áóäåò ïðîâîäèòüñÿ îöåíêà. ÍÅÎÁÕÎÄÈÌÎÅ ÂÐÅÌß: Ïÿòü-øåñòü ìåñÿöåâ (ñàìî îáñëåäîâàíèå çàíèìàåò 1-2 ìåñÿöà).
ÄËß ÁÎËÅÅ ÏÎÄÐÎÁÍÎÉ ÈÍÔÎÐÌÀÖÈÈ: http://www1.worldbank.org/publicsector/pe/trackingsurveys.htm
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
21
Àíàëèç çàòðàò è ðåçóëüòàòîâ è àíàëèç ýêîíîìè÷åñêîé ýôôåêòèâíîñòè ×òî ýòî òàêîå? Àíàëèç çàòðàò è ðåçóëüòàòîâ è àíàëèç ýêîíîìè÷åñêîé ýôôåêòèâíîñòè – ýòî èíñòðóìåíòû, èñïîëüçóåìûå äëÿ îöåíêè òîãî, îïðàâäàíû ëè çàòðàòû íà îïðåäåëåííûé âèä äåÿòåëüíîñòè ñ òî÷êè çðåíèÿ åå ðåçóëüòàòîâ è ýôôåêòîâ. Àíàëèç çàòðàò è ðåçóëüòàòîâ îïðåäåëÿåò êàê èñõîäíûå çàòðàòû, òàê è ðåçóëüòàòû â äåíåæíîì âûðàæåíèè. Àíàëèç ýêîíîìè÷åñêîé ýôôåêòèâíîñòè îïðåäåëÿåò èñõîäíûå çàòðàòû â äåíåæíîì âûðàæåíèè è ðåçóëüòàòû â íåäåíåæíîì êîëè÷åñòâåííîì âûðàæåíèè (òàêèå, êàê óëó÷øåíèå íàâûêîâ ÷òåíèÿ ó ó÷àùèõñÿ).
Äëÿ ÷åãî ìû ìîæåì èõ èñïîëüçîâàòü Ïîäêðåïëåíèå èíôîðìàöèåé ðåøåíèé î íàèáîëåå ýôôåêòèâíîì ðàñïðåäåëåíèè ðåñóðñîâ. Îïðåäåëåíèå ïðîåêòîâ ñ íàèáîëåå âûñîêèìè ñòàâêàìè ïðèáûëè íà èíâåñòèöèè. ÏÐÅÈÌÓÙÅÑÒÂÀ: Ïîäõîäû õîðîøåãî êà÷åñòâà äëÿ îïðåäåëåíèÿ ýôôåêòèâíîñòè ïðîãðàìì è ïðîåêòîâ. Äåëàþò ÿâíûìè ýêîíîìè÷åñêèå äîïóùåíèÿ, êîòîðûå, â ïðîòèâíîì ñëó÷àå, ìîãóò îñòàòüñÿ ñêðûòûìè, ëèáî êîòîðûå ìîæíî óïóñòèòü èç âèäó íà ýòàïå ðàçðàáîòêè. Ïîëåçíû äëÿ óáåæäåíèÿ ëèö, îòâåòñòâåííûõ çà âûðàáîòêó ïîëèòèêè è ôèíàíñèðîâàíèå, â òîì, ÷òî âûãîäà îïðàâäûâàåò äàííûé âèä äåÿòåëüíîñòè. ÍÅÄÎÑÒÀÒÊÈ: Î÷åíü òåõíè÷íûå ìåòîäû, òðåáóþùèå äîñòàòî÷íûõ ôèíàíñîâûõ è ÷åëîâå÷åñêèõ ðåñóðñîâ. Ìîæåò íå áûòü íåîáõîäèìûõ äàííûõ äëÿ àíàëèçà çàòðàò è ðåçóëüòàòîâ, è ïðîãíîçèðóåìûå ðåçóëüòàòû ìîãóò â áîëüøîé ñòåïåíè çàâèñåòü îò ñäåëàííûõ äîïóùåíèé. Íóæíî ñ îñòîðîæíîñòüþ èíòåðïðåòèðîâàòü ðåçóëüòàòû, â ÷àñòíîñòè, â ïðîåêòàõ, ãäå ñëîæíî îïðåäåëèòü ïîëüçó â êîëè÷åñòâåííîì âûðàæåíèè.
22
ÑÒÎÈÌÎÑÒÜ:  çíà÷èòåëüíîé ñòåïåíè âàðüèðóåòñÿ â çàâèñèìîñòè îò îõâàòà àíàëèçà è íàëè÷èÿ äàííûõ. ÍÅÎÁÕÎÄÈÌÛÅ ÍÀÂÛÊÈ: Ïîðÿäîê, èñïîëüçóåìûé â îáîèõ âèäàõ àíàëèçà, çà÷àñòóþ âûñîêîòåõíè÷åí. Äëÿ ýòîãî íåîáõîäèìû íàâûêè ýêîíîìè÷åñêîãî àíàëèçà è íàëè÷èå ñîîòâåòñòâóþùèõ ýêîíîìè÷åñêèõ è çàòðàòíûõ äàííûõ. ÍÅÎÁÕÎÄÈÌÎÅ ÂÐÅÌß:  çíà÷èòåëüíîé ñòåïåíè âàðüèðóåòñÿ â çàâèñèìîñòè îò îõâàòà àíàëèçà è íàëè÷èÿ äàííûõ.
ÄËß ÁÎËÅÅ ÏÎÄÐÎÁÍÎÉ ÈÍÔÎÐÌÀÖÈÈ: Áåëëè, Ï. è äð. (2000). Ýêîíîìè÷åñêèé àíàëèç èíâåñòèöèîííûõ îïåðàöèé: Àíàëèòè÷åñêèå èíñòðóìåíòû è ïðàêòè÷åñêîå ïðèìåíåíèå. Âñåìèðíûé áàíê, Âàøèíãòîí, îêðóã Êîëóìáèÿ. ÍÀÈÁÎËÅÅ ÓÄÀ×ÍÛÅ ÏÐÈÌÅÐÛ ÀÍÀËÈÇÀ ÇÀÒÐÀÒ È ÐÅÇÓËÜÒÀÒÎÂ: http://kms.worldbank.org/edunet/TEN_DIMENSIONS/DIM_4/cb_ce.htm
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
23
Îöåíêà ýôôåêòîâ ×òî ýòî òàêîå? Îöåíêà ýôôåêòîâ – ýòî ñèñòåìàòè÷åñêîå îïðåäåëåíèå âîçäåéñòâèÿ – ïîëîæèòåëüíîãî èëè îòðèöàòåëüíîãî, ïðåäíàìåðåííîãî èëè íåò – íà îòäåëüíûå ñåìüè, îðãàíèçàöèè è îêðóæàþùóþ ñðåäó, âûçâàííîãî îïðåäåëåííîé äåÿòåëüíîñòüþ â îáëàñòè ðàçâèòèÿ, íàïðèìåð, ïðîãðàììîé èëè ïðîåêòîì. Îöåíêà ýôôåêòîâ ïîìîãàåò íàì ëó÷øå ïîíÿòü ñòåïåíü äîñòèæåíèÿ äàííîé äåÿòåëüíîñòüþ áåäíûõ ñëîåâ íàñåëåíèÿ è âåëè÷èíó ýôôåêòà íà áëàãîñîñòîÿíèå ëþäåé. Îöåíêè ýôôåêòîâ ìîãóò âàðüèðîâàòüñÿ îò êðóïíîìàñøòàáíûõ âûáîðî÷íûõ îáñëåäîâàíèé, ïðè êîòîðûõ ïðîâîäèòñÿ ñðàâíåíèå ïðîåêòíîãî íàñåëåíèÿ è êîíòðîëüíûõ ãðóïï äî íà÷àëà ïðîåêòà è ïîñëå åãî îêîí÷àíèÿ, è, âîçìîæíî, â íåêîòîðûå ìîìåíòû â õîäå ïðîâåäåíèÿ ïðîãðàììû; äî íåáîëüøèõ áûñòðûõ îöåíîê è ñîâìåñòíûõ îöåíîê, ãäå ýôôåêò îïðåäåëÿåòñÿ ñî÷åòàíèåì äàííûõ, ïîëó÷åííûõ â õîäå ãðóïïîâûõ èíòåðâüþ, îò êëþ÷åâûõ èíôîðìàòîðîâ, ïðàêòè÷åñêèõ ïðèìåðîâ è ñóùåñòâóþùèõ âñïîìîãàòåëüíûõ äàííûõ.
Äëÿ ÷åãî ìû ìîæåì åå èñïîëüçîâàòü? Îïðåäåëåíèå ðåçóëüòàòîâ è ýôôåêòîâ äåÿòåëüíîñòè è îòäåëåíèå åå âëèÿíèÿ îò âëèÿíèÿ, âûçâàííîãî äðóãèìè âíåøíèìè ôàêòîðàìè. Ïîìîùü â ðàçúÿñíåíèè òîãî, îïðàâäàíû ëè çàòðàòû íà îïðåäåëåííóþ äåÿòåëüíîñòü. Ïîäêðåïëåíèå èíôîðìàöèåé ðåøåíèé î íåîáõîäèìîñòè ðàñøèðåíèÿ, èçìåíåíèÿ èëè ëèêâèäàöèè ïðîåêòîâ, ïðîãðàìì èëè ïîëèòèêè. Ïîëó÷åíèå îïûòà äëÿ óëó÷øåíèÿ ðàçðàáîòêè è óïðàâëåíèÿ áóäóùåé äåÿòåëüíîñòüþ. Ñðàâíåíèå ýôôåêòèâíîñòè àëüòåðíàòèâíûõ ìåð. Óêðåïëåíèå îòâåòñòâåííîñòè çà ðåçóëüòàòû. ÏÐÅÈÌÓÙÅÑÒÂÀ: Îáåñïå÷èâàåò ðàñ÷åòû âåëè÷èíû ðåçóëüòàòîâ è ýôôåêòîâ äëÿ ðàçëè÷íûõ äåìîãðàôè÷åñêèõ ãðóïï, ðåãèîíîâ, èëè ÷åðåç îïðåäåëåííûé ïðîìåæóòîê âðåìåíè. Äàåò îòâåòû íà íåêîòîðûå íàèáîëåå âàæíûå âîïðîñû â îáëàñòè ðàçâèòèÿ – äî êàêîé ñòåïåíè ìû ïðîâîäèì ðàçëè÷èå? Êàêîâû ðåçóëüòàòû íà ìåñòàõ? Êàê ìû ìîæåì óëó÷øèòü ñèòóàöèþ? Ñèñòåìàòè÷åñêèé àíàëèç è òî÷íîñòü ìîãóò äîáàâèòü óâåðåííîñòè ìåíåäæåðàì è ëèöàì, îòâåòñòâåííûì çà âûðàáîòêó ïîëèòèêè ïðè ïðèíÿòèè ðåøåíèé.
24
ÍÅÄÎÑÒÀÒÊÈ: Íåêîòîðûå ïîäõîäû î÷åíü äîðîãîñòîÿùè è çàíèìàþò ìíîãî âðåìåíè, õîòÿ òàêæå èñïîëüçóþòñÿ è áîëåå áûñòðûå è ýêîíîìíûå ïîäõîäû. Ñíèæàåò ïîëåçíîñòü, êîãäà ëèöàì, îòâåòñòâåííûì çà ïðèíÿòèå ðåøåíèé, íóæíà ñðî÷íàÿ èíôîðìàöèÿ. Ñëîæíîñòè â îïðåäåëåíèè ñîîòâåòñòâóþùèõ êîíòðàðãóìåíòîâ. ÑÒÎÈÌÎÑÒÜ: Ñòîèìîñòü ðÿäà îöåíîê ýôôåêòîâ, êîòîðûå ïðîâîäèëèñü Âñåìèðíûì áàíêîì, âàðüèðóåòñÿ îò 200 000 äî 900 000 äîëëàðîâ â çàâèñèìîñòè îò âåëè÷èíû ïðîãðàììû, åå ñëîæíîñòè è ñáîðà äàííûõ. Áîëåå ïðîñòûå è áûñòðûå îöåíêè ìîæíî ïðîâîäèòü â ïðåäåëàõ 100 000 äîëëàðîâ, à â íåêîòîðûõ ñëó÷àÿõ – è 10 000-20 000 äîëëàðîâ ÑØÀ. ÍÅÎÁÕÎÄÈÒÌÛÅ ÍÀÂÛÊÈ: Ñèëüíûå òåõíè÷åñêèå íàâûêè â ïðîâåäåíèè ìåñòíûõ íàó÷íîòåõíè÷åñêèõ èññëåäîâàíèé, óïðàâëåíèè, àíàëèçå è îò÷åòíîñòè.  èäåàëå, áàëàíñ êà÷åñòâåííûõ è êîëè÷åñòâåííûõ íàâûêîâ èññëåäîâàíèé ó ãðóïïû ñïåöèàëèñòîâ, ïðîâîäÿùèõ îöåíêó. ÍÅÎÁÕÎÄÈÌÎÅ ÂÐÅÌß: Ìîæåò çàíèìàòü äî 2 ëåò è áîëåå. Áûñòðûå îöåíêè ìîæíî çà÷àñòóþ ïðîâîäèòü ìåíåå ÷åì çà 6 ìåñÿöåâ. ÏÐÈÌÅÐÛ ÏËÀÍΠÎÖÅÍÊÈ ÝÔÔÅÊÒΠÏëàíû ðàíäîìèçèðîâàííîé îöåíêè, âêëþ÷àÿ ñáîð èíôîðìàöèè ïî ïðîåêòíûì è êîíòðîëüíûì ãðóïïàì â äâà èëè áîëåå ìîìåíòà âðåìåíè, îáåñïå÷èâàþò íàèáîëåå òî÷íûé ñòàòèñòè÷åñêèé àíàëèç ýôôåêòîâ è âêëàäà ïðîåêòà èëè èíûõ ôàêòîðîâ. Íî íà ïðàêòèêå ðåäêî êîãäà ñóùåñòâóåò âîçìîæíîñòü èñïîëüçîâàòü ýòè ïëàíû äëÿ îãðàíè÷åíèé ïî ñòîèìîñòè, âðåìåíè, ìåòîäîëîãè÷åñêèõ èëè ýòè÷åñêèõ îãðàíè÷åíèé. Ïîýòîìó áîëüøèíñòâî îöåíîê ýôôåêòîâ èñïîëüçóþò ïëàíû ìåíåå äîðîãèõ è ìåíåå òî÷íûõ îöåíîê.  ïðèâåäåííîé íèæå òàáëèöå îïèñàíû ÷åòûðå ïîäõîäà ê ïëàíàì îöåíêè ýôôåêòîâ ïðè ïðîâåäåíèè îöåíêè ðàçâèòèÿ. Ïåðâûé ïðèìåð – ýòî ïëàí ðàíäîìèçèðîâàííîé îöåíêè; âòîðîé – ýòî êâàçè-ýêñïåðèìåíòàëüíûé ïëàí, ïðè êîòîðîì âûáèðàåòñÿ «íåýêâèâàëåíòíàÿ» êîíòðîëüíàÿ ãðóïïà, êîòîðàÿ äîëæíà ìàêñèìàëüíî ñîîòâåòñòâîâàòü õàðàêòåðèñòèêàì ïðîåêòíîãî íàñåëåíèÿ; â òðåòüåì ïðèìåðå ïðîåêòíîå íàñåëåíèå ñðàâíèâàþò ñ íåýêâèâàëåíòíîé êîíòðîëüíîé ãðóïïîé ïîñëå ðåàëèçàöèè ïðîåêòà; à ÷åòâåðòûé ïðèìåð – ýòî áûñòðàÿ îöåíêà, ñî÷åòàþùàÿ ãðóïïîâûå èíòåðâüþ, êëþ÷åâûõ èíôîðìàòîðîâ, ïðàêòè÷åñêèå ïðèìåðû è âñïîìîãàòåëüíûå äàííûå. Êàæäàÿ ïîñëåäóþùàÿ ìîäåëü òåðÿåò ìåòîäîëîãè÷åñêóþ òî÷íîñòü, â îáìåí íà ÷òî ïðîèñõîäèò çíà÷èòåëüíîå ñîêðàùåíèå íåîáõîäèìûõ çàòðàò è âðåìåíè.
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
ÄËß ÁÎËÅÅ ÏÎÄÐÎÁÍÎÉ ÈÍÔÎÐÌÀÖÈÈ: Áåéêåð, Äæ. (2000). Îöåíêà âîçäåéñòâèÿ ïðîåêòîâ íà óðîâåíü áåäíîñòè: Ïîñîáèå äëÿ ïðàêòèêîâ. Âñåìèðíûé áàíê, Âàøèíãòîí, îêðóã Êîëóìáèÿ. http://www.worldbank.org/poverty/library/impact.htm Âåá-ñàéò Âñåìèðíîãî áàíêà ïî îöåíêå ýôôåêòîâ: http://www.vvorldbank.org/poverty/impact/ Ðîø, Ñ. (1999) Îöåíêà ýôôåêòîâ äëÿ àãåíòñòâ ðàçâèòèÿ; Îò îáó÷åíèÿ ê èçìåíåíèþ ñòîèìîñòè. Îêñôàì, Îêñôîðä.
25
26 4 Ìîäåëè îöåíêè ýôôåêòîâ Модель
План
Пример
Примерная стоимость и сроки
1. Ðàíäîìèçèðîâàííàÿ îöåíêà äî è ïîñëå ðåàëèçàöèè ïðîåêòà.
Ñóáúåêòû (ñåìüè, øêîëû, ñîîáùåñòâà è ò.ä.) âûáèðàþòñÿ ñëó÷àéíî â ïðîåêòíûå è êîíòðîëüíûå ãðóïïû.  îáåèõ ãðóïïàõ èñïîëüçóþòñÿ àíêåòû èëè èíûå èíñòðóìåíòû äëÿ ñáîðà äàííûõ (àíòðîïîìåòðè÷åñêèå äàííûå, øêîëüíûå ïîêàçàòåëè è ò.ä.) äî íà÷àëà è ïîñëå îêîí÷àíèÿ ïðîåêòà.  õîäå ðåàëèçàöèè ïðîåêòà òàêæå ìîæíî ïðîâîäèòü äîïîëíèòåëüíûå íàáëþäåíèÿ.
Âîäîñíàáæåíèå è êàíàëèçàöèÿ èëè ïðåäîñòàâëåíèå èíûõ óñëóã, òàêèõ êàê æèëèùíàÿ èëè ìóíèöèïàëüíàÿ èíôðàñòðóêòóðà è ò.ä., êîãäà ñïðîñ ïðåâûøàåò ïðåäëîæåíèå, à áåíåôèöèàðèè âûáèðàþòñÿ ëîòåðååé. Ïðèìåð: ñîöèàëüíûå ðàáîòíèêè â Áîëèâèè.
1-5 ëåò â çàâèñèìîñòè îò âðåìåíè, êîòîðîå äîëæíî ïðîéòè äî òîãî, êàê áóäóò çàìåòíû ýôôåêòû. Ñòîèìîñòü ìîæåò âàðüèðîâàòüñÿ îò 50 000 äî 1 ìëí. äîëëàðîâ ÑØÀ â çàâèñèìîñòè îò âåëè÷èíû è ñëîæíîñòè èçó÷àåìîé ïðîãðàììû.
2. Êâàçèýêñïåðèìåíòàëüíûé ïëàí äî íà÷àëà è ïîñëå çàâåðøåíèÿ ñðàâíåíèé ïðîåêòíîãî è êîíòðîëüíîãî íàñåëåíèÿ.
Åñëè íåâîçìîæíà ðàíäîìèçàöèÿ, âûáèðàåòñÿ êîíòðîëüíàÿ ãðóïïà, êîòîðàÿ ìàêñèìàëüíî ñîîòâåòñòâóåò õàðàêòåðèñòèêàì ïðîåêòíîé ãðóïïû. Èíîãäà âûáèðàåòñÿ òèï ñîîáùåñòâ, èç êîòîðûõ áóäóò ïðèâëåêàòüñÿ ó÷àñòíèêè ïðîåêòà. Åñëè ðåàëèçàöèÿ ïðîåêòà ñîñòîèò èç íåñêîëüêèõ ýòàïîâ, ó÷àñòíèêè, âûáèðàåìûå äëÿ ïîñëåäóþùèõ ýòàïîâ, ìîãóò èñïîëüçîâàòüñÿ äëÿ êîíòðîëÿ ïðîåêòíîé ãðóïïû ïåðâîãî ýòàïà.
Ýòè ìîäåëè ïðèìåíÿëèñü Âñåìèðíûì áàíêîì ïðè ïðîâåäåíèè íèçêîçàòðàòíûõ æèëèùíûõ ïðîãðàìì â Ñàëüâàäîðå, Çàìáèè, Ñåíåãàëå è íà Ôèëèïïèíàõ.
Ñòîèìîñòü è ñðîêè àíàëîãè÷íû Ìîäåëè 1.
3. Ôàêòè÷åñêîå ñðàâíåíèå ïðîåêòíîé è íåýêâèâàëåíòíîé ãðóïïû.
Ïî áåíåôèöèàðèÿì ïðîåêòà ñîáèðàþòñÿ äàííûå, à íåýêâèâàëåíòíàÿ êîíòðîëüíàÿ ãðóïïà âûáèðàåòñÿ òàê æå, êàê è äëÿ Ìîäåëè 2. Äàííûå ñîáèðàþòñÿ òîëüêî ïîñëå îêîí÷àíèÿ ðåàëèçàöèè ïðîåêòà. Çà÷àñòóþ ïðèìåíÿåòñÿ ìíîãîìåðíûé àíàëèç äëÿ ñòàòèñòè÷åñêîãî êîíòðîëÿ ðàçëè÷èé â ïðèìåíåíèè îáåèõ ãðóïï.
Îöåíêà ýôôåêòîâ ïðîãðàìì ìèêðîêðåäèòîâàíèÿ â Áàíãëàäåø. Äåðåâíè, ãäå ïðîâîäèëèñü ïðîãðàììû ìèêðîêðåäèòîâàíèÿ, ñðàâíèâàëèñü ñ àíàëîãè÷íûìè äåðåâíÿìè áåç òàêèõ ïðîãðàìì êðåäèòîâàíèÿ.
50 000 äîëëàðîâ ÑØÀ è âûøå. Êàê ïðàâèëî, ñòîèìîñòü ñîñòàâëÿåò îò îäíîé òðåòè äî ïîëîâèíû ñîïîñòàâèìîãî èññëåäîâàíèÿ ñ èñïîëüçîâàíèåì Ìîäåëåé 1 èëè 2.
Д Е П А Р ТА М Е Н Т
ОЦЕНКИ О П Е РА Ц И Й ВСЕМИРНОГО БАНКА РА З В И Т И Е ВОЗМОЖНОСТЕЙ ОЦЕНКИ
27 4. Îïðåäåëåíèå ýôôåêòà áûñòðûõ îöåíîê.
Îäíè îöåíêè êàñàþòñÿ òîëüêî îáñëåäóåìûõ ãðóïï, íà êîòîðûõ ïîâëèÿë ïðîåêò, òîãäà êàê äðóãèå âêëþ÷àþò ñîîòâåòñòâóþùèå òðåáîâàíèÿì êîíòðîëüíûå ãðóïïû. Ìîæíî ïðèìåíÿòü ìåòîäû ñîâìåñòíîé ðàáîòû äëÿ îïðåäåëåíèÿ èçìåíåíèé â ðåçóëüòàòå ïðîåêòà, òîãî, êòî ïîëó÷èë âûãîäó, à êòî íåò, è êàêîâû áûëè ñèëüíûå è ñëàáûå ñòîðîíû ïðîåêòà. Äëÿ ñðàâíåíèÿ ãðóïïîâîé èíôîðìàöèè ñ ìíåíèÿìè êëþ÷åâûõ èíôîðìàòîðîâ è èíôîðìàöèè, ïîëó÷åííîé èç âñïîìîãàòåëüíûõ èñòî÷íèêîâ, èñïîëüçóþò ìåòîä òðèàíãóëÿöèè. Ìîæíî ðàçðàáîòàòü ïðàêòè÷åñêèå ïðèìåðû ïî îòäåëüíûì ëèöàì èëè ãðóïïàì äëÿ áîëåå ãëóáîêîãî ïîíèìàíèÿ ïðîöåññîâ èëè èçìåíåíèé.
Îöåíêà ïðîåêòîâ óïðàâëåíèÿ ìåñòíûì âîäîñíàáæåíèåì â Èíäîíåçèè.
25 000 äîëëàðîâ ÑØÀ è âûøå (ñòîèìîñòü èññëåäîâàíèÿ â Èíäîíåçèè áûëà 150 000 äîëëàðîâ ÑØÀ). Îäíè èññëåäîâàíèÿ çàâåðøàþòñÿ â òå÷åíèå 12 ìåñÿöåâ, äëÿ äðóãèõ íóæåí ãîä èëè áîëåå.
28
Äîïîëíèòåëüíûå ðåñóðñû ïî ìîíèòîðèíãó è îöåíêå Âåá-ñàéòû Óëó÷øåíèå îöåíêè, ìîíèòîðèíãà è êà÷åñòâà Âñåìèðíîãî áàíêà: http://www.worldbank.org/evaluation/ Ðàçâèòèå âîçìîæíîñòåé ìîíèòîðèíãà è îöåíêè: http://www.worldbank.org/oed/ecd/ Íîâîñòè ìîíèòîðèíãà è îöåíêè: http://www.mande.co.uk/
ВСЕМИРНЫЙ БАНК 1818 H Street, N.W. Washington, D.C. 20433, U.S.A. Telephone: 202-477-1234 Facsimile: 202-477-6391 Telex: MCI 64145 WORLDBANK MCI 248423 WORLDBANK Internet: www.worldbank.org Operations Evaluation Department Knowledge Programs and Evaluation Capacity Development Group (OEDKE) E-mail: eline@worldbank.org Telephone: 202-458-4497 Facsimilie: 202-522-3125