본문 바로가기
KERD
논문KCI 등재

국정과제 시민평가에 대한 심층분석: ChatGPT를 활용한 국정과제 정책만족도 시민의견 분석을 중심으로

In-Depth Analysis on Citizen Evaluation of National Policy Agendas: Focusing on the Analysis of Citizen Opinions on Policy Satisfaction for National Agendas Using ChatGPT

황태연|윤수재
성균관대학교 국정전문대학원 (graduate school of governance)|2023.12|국정관리연구 (Journal of Governance Studies)|제18권 제4호|pp. 31-67|DOI 10.16973/jgs.2023.18.4.002

0

조회

0

다운로드

0

인용

0

참고문헌

키워드

국정과제정책평가Policy Evaluation시민평가정책만족도Policy SatisfactionNational Policy AgendaCitizen Evaluation

초록

본 연구에서는 국정과제에 대한 일반국민의 개선의견을 유형화하고 분류함으로써 일반국민이 지닌 정책에 대한 의견의 활용 가능성을 탐색하고자 하였다. 개방형 문항으로 응답된 일반국민의 개선의견은 시민평가의 관점에서 큰 가치를 지님에도 불구하고, 분석에 수반되는 시간과 비용으로 인하여 충분히 활용되지 못하고 있기 때문이다. 분석에 사용된 자료는 한국행정연구원에서 수행한 2021년 국정과제 정책만족도 조사결과 중 100대 국정과제에 대한 일반국민의 개선의견이다. 개선의견의 유형화를 위해 토픽모델링을 수행하여 총 11가지의 주요 개선의견 유형을 도출하였고, 이를 바탕으로 개별 개선의견을 분류하였다. 이후 경제정책과 복지정책간의 개선의견 유형 비중 차이를 비교하였고, 리커트 척도로 측정된 정책에 대한 만족도 상위집단과 하위집단 간의 개선의견 유형 비중 차이를 확인하였다. 분석결과 복지정책에서는 정책목표와 정책수단 간 정합성 및 연계성에 관련된 개선의견의 비중이 크게 나타났고, 경제정책에서는 정책을 집행하는 과정에서 정부의 적극성 및 추진력과 관련한 개선의견의 비중이 상대적으로 크게 나타났다. 또한 만족도가 높은 집단에서는 주로 정책의 목표와 수단 측면보다는 정책홍보나 정책목표와 수단 간 정합성 및 연계성 향상에 관련된 개선의견이 많이 나타났으며, 만족도가 낮은 집단에서는 정책목표의 조정이나 의견수렴 등 정책의 근본적인 측면에 대한 개선의견의 비중이 크게 나타났다. 주요 개선의견 유형 분포를 바탕으로 군집분석을 실시한 결과, 4개의 국정과제 군집이 도출되었고 군집별로 서로 다른 개선의 방향성이 요구되고 있음을확인하였다. 본 연구는 비전문가로 여겨졌던 일반국민, 즉 시민들이 제시한 정책 개선의견이지닌 가치의 활용 가능성을 탐색적으로 확인하였다는 점에서 의의를 갖는다.

Abstract

This study aims to explore the feasibility of utilizing the general public's opinions on policies by categorizing and classifying their suggestions for improvement regarding national policy agendas. Despite the significant value of the general public's improvement suggestions responded to open-ended questions from the perspective of citizen evaluation, they have not been sufficiently utilized due to the time and costs associated with analysis. The data used for analysis are the improvement suggestions from the general public on the 100 major national policy agendas, which are part of the results of the 2021 National Policy Agenda Satisfaction Survey conducted by the Korea Institute of Public Administration. For the categorization of improvement suggestions, topic modeling was performed, deriving a total of 11 major types of improvement suggestions, and individual suggestions were classified based on this. Subsequently, the proportions of types of improvement suggestions were compared between economic and welfare policies, and differences in the proportions of types of improvement suggestions were verified between the groups with higher and lower policy satisfaction measured on a Likert scale. The analysis revealed that, in welfare policies, a large proportion of improvement suggestions were related to the consistency and linkage between policy goals and means, whereas in economic policies, a relatively large proportion of improvement suggestions were related to the government's proactivity and driving force in the process of policy implementation. Furthermore, the group with higher satisfaction primarily showed improvement suggestions related to policy promotion and enhancement of consistency and linkage between policy goals and means, while the group with lower satisfaction showed a large proportion of improvement suggestions on fundamental aspects of policy, such as adjustment of policy goals and gathering opinions. Based on the distribution of major types of improvement suggestions, cluster analysis was conducted, resulting in the derivation of four clusters of national policy agendas, confirming that each cluster requires different directions for improvement. This study is significant in that it exploratively verifies the feasibility of utilizing the value of policy improvement suggestions provided by the general public, or citizens, who have been regarded as non-experts.

참고문헌 (38)

  1. 2023년도 정부업무평가 시행계획(안), "국무조정실", ~ (2023)
  2. 2021년도 국정과제 정책만족도 조사 결과보고서, "국무조정실", ~ (2021)
  3. 김동환, "정책 평가 단계에 있어서 시민단체의 역할에 관한 사례분석", 한국공공관리학보, 18(1), pp.209~229 (2004)
  4. 김연희, "행정서비스의 품질이 고객만족에 미치는 영향에 관한 연구 - 지방정부 노인복지서비스 만족도 영향요인 분석을 중심으로 -", 사회과학연구, 52(1), pp.287~315 (2013), 사회과학연구원
  5. 김이수, "지방비영리조직 역할이질성의 영향요인에 관한 탐색적 연구 - 지방비영리민간등록단체를 중심으로 -", 한국자치행정학보, 27(3), pp.113~143 (2013), 한국자치행정학회[DOI]
  6. 김현구, "정부업무 기관평가의 이론적 논고", 한국행정학보, 37(4), pp.57~78 (2003), 한국행정학회
  7. 문승민, "기후변화 대응을 위해 기꺼이 세금을 납부할 것인가? - 정책 리터러시와 정책 만족도를 중심으로 -", 한국정책학회보, 31(4), pp.179~213 (2022), 한국정책학회[DOI]
  8. 박경호, "서울시 시민평가제의 조사모형과 방법에 관한 비판적 검토", 정책분석평가학회보, 11(1), pp.47~66 (2001)
  9. 박상필, "서울시 사회적 경제 정책의 시민참여행정 평가", NGO 연구, 9(1), pp.33~74 (2014)
  10. 서복경, "복지확대에 대한 국민 중심의 정책평가: 고령자정책 사례를 중심으로", 현대정치연구, 5(1), pp.5~34 (2012), 현대정치연구소[DOI]
  11. 윤수재, "중앙정부 정책만족도 개선방안에 대한 내부고객과 외부전문가의 인식분석 - 언어네트워크분석을 중심으로 -", 한국정책학회보, 20(3), pp.133~162 (2011), 한국정책학회
  12. 윤수재, "국정과제 정책만족도에 미치는 영향요인 연구: 경제･복지분야 국정과제 만족도를 중심으로", 정책분석평가학회보, 30(2), pp.1~28 (2020), 한국정책분석평가학회[DOI]
  13. 정부업무평가 국민만족도 활용제고 방안, "이광희", KIPA, ~ (2016)
  14. 이광희, "정부업무평가의 국민만족도 조사결과 활용실태 분석 및 개선방안", 정부학연구, 23(2), pp.95~126 (2017), 정부학연구소[DOI]
  15. 이근주, "정책평가에 있어 국민참여 확대에 대한 시론적 논의", 정책분석평가학회보, 28(2), pp.341~362 (2018), 한국정책분석평가학회[DOI]
  16. 이석환, "정부혁신과 성과관리에 있어서의 고객과 국민(시민)의 개념에 대한 소고", 한국행정학회 동계학술대회 발표논문집 (2006)
  17. 이석환, "시민 집중형 정책평가(Citizen-focused Policy Evaluation): 시민의 다각적 역할에 대한 소고", 정책분석평가학회보, 28(2), pp.317~340 (2018), 한국정책분석평가학회[DOI]
  18. 이희주, "질병 및 예방행동에 대한 인지 수준이 질병 대응 정책만족도에 미치는 영향: 부천, 제천, 단양을 중심으로", 정책분석평가학회보, 33(2), pp.215~246 (2023), 한국정책분석평가학회
  19. 조정래, "정책수단과 정책만족도: 문화예술인의 정책만족도를 중심으로", 정부학연구, 23(2), pp.283~319 (2017), 정부학연구소[DOI]
  20. Aberbach, J. D., "Citizens and consumers: An NPM dilemma", Public management review, 7(2), pp.225~246 (2005)
  21. Bennis Wai Yip So, "Civic engagement in the performance evaluation of the public sector in China: Building horizontal accountability to enhance vertical accountability", Public Management Review, 16(3), pp.341~357 (2014)
  22. Bholowalia, P., "EBK-means: A clustering technique based on elbow method and k-means in WSN", International Journal of Computer Applications, 105(9), pp.1~6 (2014)
  23. Brown, K., "Subjective and objective measures of police service delivery", Public Administration Review, 43(1), pp.50~58 (1983)
  24. Brudney, J. L., "Urban policy making and subjective service evaluations: Are they compatible?", Public Administration Review, 42(2), pp.127~135 (1982)
  25. Hanberger, A, "Policy and program evaluation, civil society, and democracy", American Journal of Evaluation, 22(2), pp.211~228 (2001)
  26. Hartigan, J. A., "A k-means clustering algorithm", Applied Statistics, 28(1), pp.100~108 (1979)
  27. House, E. R., "Deliberative democratic evaluation checklist", ~ (2000)
  28. Using GPT-4 with prompt engineering for financial industry tasks, "LSEG", LSEG Analytics, ~ (2023)
  29. Michels, A., "Examining citizen participation: Local participatory policy making and democracy", Local Government Studies, 36(4), pp.477~491 (2010)
  30. Miller, T. I., "Standards of excellence: US residents' evaluations of local government services", Public Administration Review, 51(6), pp.503~514 (1991)
  31. Oliver, R. L, "A cognitive model of the antecedents and consequences of satisfaction decisions", Journal of Marketing Research, 17(4), pp.460~469 (1980)
  32. Parks, R. B, "Linking objective and subjective measures of performance", Public Administration Review, 44(2), pp.118~127 (1984)
  33. Poister, T. H., "Citizen ratings of public and private service quality: A comparative perspective", Public Administration Review, 54(2), pp.155~160 (1994)
  34. Rathje, S., "GPT is an effective tool for multilingual psychological text analysis", ~ (2023)
  35. Schachter, E., "U.S. Patent No. 7,836,045", U.S. Patent and Trademark Office, ~ (2010)
  36. So, B. W. Y, "Civic engagement in the performance evaluation of the public sector in China: Building horizontal accountability to enhance vertical accountability", Public Management Review, 16(3), pp.341~357 (2014)
  37. Stipak, B, "Citizen satisfaction with urban services: Potential misuse as a performance indicator", Public Administration Review, 39(1), pp.46~52 (1979)
  38. Van der Maaten, L., "Visualizing data using t-SNE", Journal of Machine Learning Research, 9(11) (2008)

관련 논문AI추천

전자청원 플랫폼의 도전과 기회: 청와대 국민청원 제시 글의 토픽모델링김송은, 남태우, 남현동, 오민정정부혁신연구소 · 정부행정2022 · 제18권 제1호정부업무평가의 국민만족도 조사결과 활용실태 분석 및 개선방안이광희, 이석민정부학연구소 · 정부학연구2017 · 제23권 제2호인천은 무엇을 원하는가: 국민 신문고 민원 데이터를 활용한 시민 의견 분석김청택, 이준호(재) 인천연구원 · 도시연구2021 · 제20호플랫폼 정부의 온라인 시민참여: ‘인천은소통e가득’ 코로나19 관련 청원 토픽모델링을 중심으로서형준(재) 인천연구원 · 도시연구2021 · 제20호기대불일치이론을 적용한 중앙정부 국정업무와 정책수행에 대한 국민만족도 결정요인 : 긍정적･부정적 불일치의 비대칭적 영향력을 바탕으로이규명, 조유선, 최흥석한국행정연구원 · 한국행정연구2021 · 제30권 제2호지방정부의 시민참여관리 정책도구가 정책과정의 효과성에 미치는 영향에 관한 탐색 연구 -시민참여제도의 성과평가제도의 조절효과를 중심으로-김이수, 최예나한국자치행정학회 · 한국자치행정학보2020 · 제34권 제3호

이 간행물의 다른 논문 (8건)

민주화 이후 한국 정부의 시민 정치참여에 대한 책무 연구: 좋은 민주주의로 가고 있는가?이승미pp. 1-29우리나라 폐기물 처리시설 입지의 환경불평등 분석이승환pp. 69-99지역사회 교육플랫폼 거버넌스에 관한 연구 : 진로직업체험지원센터를 대상으로한주희, 정일환, 이찬희pp. 101-133근린지역의 소득혼합과 이웃신뢰 및 관계에 관한 연구 : 소득계층별 차이를 중심으로김선휘, 신은진pp. 135-165과학기술혁신정책의 과학화: 근거기반 정책 설계에 대한 인식 연구윤지웅, 이호규, 최미정pp. 167-195
원문 보기