All Issue

2023 Vol.57, Issue 4 Preview Page

Research Article

ChatGPT and Bard: The potential of Generative AI tools for Reviving South Korea's Shrinking Regions

생성형 인공지능 서비스로 살펴본 지방소멸 위기 대응과 한계점: ChatGPT와 Bard를 활용하여

Jeon-Young Kanga
,
Minjun Kimb
,
Won Do Leec*
강 전영a
,
김 민준b
,
이 원도c*
aAssitant Professor, Department of Geography, Kyung Hee University
bAssociate Research Fellow, Daegu Policy Institute
cAssociate Research Fellow, Korea Research Institute for Land Administration
a경희대학교 지리학과 조교수
b대구정책연구원 전략기획실 부연구위원
c한국지방행정연구원 부연구위원
*Corresponding Author
31 December 2023. pp. 477-490
PDF XML Citation
Abstract

Generative artificial intelligence (AI) services can answer users' questions using trained data retrieved from Natural Language Processing models. These services provide useful information for everyday concerns and can also be helpful to researchers by providing findings from a wide array of existing studies. This paper investigates the practical usage of these services for academic work by understanding their capabilities and limitations. To do this, we asked ChatGPT and Bard three questions about the acceptable terminology of the vanishing region, where it is taking place in South Korea, and what actions to be required. Our findings show that both services provided presentable answers corresponding to these questions in general, but they were unable to reveal factual information that meets researchers' expectations. It would be caused by the ambiguous conceptual lens and lack of relevant studies. It also demonstrates that prompting engineering can improve the quality and relevance of the responses of generative AI services, as evidenced by a case study. The paper concludes with a discussion of how developing technologies could help researchers. However, the capabilities and roles of generative AI services would be limited to research preview, not generating knowledge as well as researchers do.

Keywords
Generative artificial intelligence services
Large language models
Shrinking region
Depopulation regions
Prompt engineering

생성형 인공지능 서비스는 대규모 언어모델이 학습된 데이터를 통해 사용자의 질의에 가장 적절한 답변을 제공하는 인공지능 기술이다. 이를 통해 일상생활에 유용한 정보와 함께 광범위한 선행연구를 함축하여 학술연구에 유용한 시사점을 획득할 수 있다. 이에 본 연구에서는 생성형 인공지능 서비스를 통해 지역현안 및 해결방안 도출을 위한 보조도구로써의 가능성에 대하여 살펴보았다. 이를 위해 ChatGPT와 Bard를 활용하여 지방소멸 담론과 관련한 질의와 획득한 응답결과를 비교･평가하였다. 실험결과, 지방소멸 정의와 위험지역, 대응방향에 대한 생성형 인공지능 서비스의 답변은 적절한 수준으로 보였다. 하지만 두 서비스 모두 지방소멸 용어에 대한 인식이 불명확하여 세부내용의 정확성과 신뢰성은 기대한 수준에 미치지 못했다. 이는 지방소멸의 모호한 개념과 이를 다룬 선행연구가 부재한 것에서 비롯된 것으로 판단된다. 이후 사례분석을 통해 지자체의 지방소멸 대응 노력에 대해 인지하고 있는지, 또한 향상된 명령어 작성이 응답결과에 어떠한 영향을 미치는지를 살펴보았다. 본 연구가 시사하는 바는 다음과 같다. 첫째, 생성형 인공지능 서비스의 특성에 따라 같은 질문에도 다른 응답결과가 제공될 수 있다. 둘째, 더 좋은 응답결과를 얻기 위해선 언어모델이 인식할 수 있는 구체적이고 적절한 질문의 구성, 즉 프롬프트 엔지니어링이 고려되어야 한다. 셋째, 응답결과의 정책연구 활용을 위해선 사용자의 개입, 즉 추가적인 확인과 적합성 검토가 요구된다. 본 연구의 실험과 사례분석 결과는 학술연구 분야의 생성형 인공지능 서비스 활용에 대한 중요한 시사점을 제공한다.

키워드
생성형 인공지능 서비스
대규모 언어모델
지방소멸
인구감소지역
프롬프트 엔지니어링
References
1
강옥주, 2023, 생성형 AI 모델과 대화하는 프롬프트 엔지니어링(Prompt Engineering), 인사이트 리포트(2023.10.16), SAMSUNG SDS .
2
강전영･황철수, 2022, "GIS 및 공간 분석 연구의 재현성 (Reproducibility) 및 반복가능성 (Replicability) - 대한지리학회지를 사례로," 대한지리학회지 57(5): 425-435.
3
기획재정부, 2019, 중소기업 중심 '강원형 일자리' 이모빌리티 본궤도 올랐다(2019,08,14).
4
김남욱, 2022, "지방소멸에 대응한 공법적 과제," 국가법연구 18(3): 1-46. 10.46751/nplak.2022.18.3.1
5
김민준･강전영, 2022, "서울시의 도시홍수 관련 임시대피시설의 공간적 분포 탐색," 국토지리학회지 56(3): 235-244. 10.22905/kaopqj.2022.56.3.7
6
김성근, 2023, 어느 정책연구자의 ChatGPT 활용기, 행정포커스, 한국행정연구원.
7
김정환 역, 2015, 지방소멸: 인구감소로 연쇄붕괴하는 도시와 지방의 생존전략, 서울: 와이즈베리.
8
김현호･이제연･김도형, 2021, 국가위기 대응을 위한 지방소멸 방지전략의 개발, 한국지방행정연구원.
9
문병효, 2021, "지방분권과 지방소멸 대응방안: 이른바 '지방소멸'에 직면한 지방자치의 현실과 대응책을 중심으로," 한국지방자치법학회 71(21): 243-288.
10
양지훈･윤상혁, 2023, ChatGPT를 넘어 생성형(Generative) AI 시대로: 미디어･콘텐츠 생성형 AI 서비스 사례와 경쟁력 확보 방안, 미디어 이슈 & 트렌드., 한국방송통신전파진흥원.
11
유재진, 2023, "인공지능을 활용한 지리교육 연구: ChatGPT 기반 질의･응답을 중심으로," 한국사진지리학회지 33(1): 162-173.
12
이경님･조은경, 2023, "초거대 언어 모델을 기반으로 한 AI 대화 인터페이스: AI 대화 모델의 현황과 언어적 연구의 모색," 국어학 105: 345-374. 10.15811/jkl.2023..105.010
13
이민주･김슬기･김의준, 2023, "지방소멸 위기지역 유형화와 특성 분석," 도시연구 23: 93-137.
14
이원도･유수동･김영롱, 2023a, "인구감소 위기 대응을 위한 지역활력의 시계열 변동성 분석," 지방행정연구 37(1): 251-280.
15
이원도･유수동･전대욱･이경은･윤소연･이소영･윤준호, 2023b, 인구감소지역 지원방안 연구: 원인 분석, 한국지방행정연구원.
16
이원도･윤소연･강전영, 2022a, "재현성과 반복가능성이 고려된 지역활력 대시보드 개발," 한국지도학회지 22(3): 89-100. 10.16879/jkca.2022.22.3.089
17
이원도･윤소연･신두섭･전대욱･여효성･이경은･유수동･윤준호･유란희, 2022b, 인구감소지역 지원방안 연구: 빅데이터 분석, 한국지방행정연구원.
18
이유빈･이영호･성정창･황태건･황철수, 2019, "AAG 2000-2019 학회 발표논문 분석을 통한 미국의 GIS 연구동향 분석," 국토지리학회지 53(4): 495-508.
19
이철희･황영지, 2022, "한국의 지역 간 인구 불균형 확대의 인구학적 요인 분석," 한국인구학, 45(2): 105-135. 10.31693/KJPS.2022.03.45.2.105
20
정성호, 2019, "지방소멸론에 대한 비판적 검토," 지역사회학 20(3): 5-28. 10.17088/tksyms.2019..53.001
21
정한민･박정훈, 2023, "ChatGPT를 이용한 문헌 작성 설계 및 이슈," 한국지식정보기술학회 논문지 18(1): 31-40.
22
행정안전부, 2021, '인구감소지역' 89곳 지정, 지방 살리기 본격 나선다(2021,10,18.).
23
Alves, D., A. P. Barreira, M. H. Guimarães, and T. Panagopoulos, 2016, Historical trajectories of currently shrinking Portuguese cities: A typology of urban shrinkage, Cities 52: 20-29. 10.1016/j.cities.2015.11.008
24
Castelvecchi, D., 2022, Are ChatGPT and AlphaCode going to replace programmers?, Naturehttps://doi.org/10.1038/d41586-022-04383-z. 10.1038/d41586-022-04383-z
25
Coeckelbergh, M., and D. J. Gunkel, 2023, ChatGPT: deconstructing the debate and moving it forward, AI & SOCIETYhttps://doi.org/10.1007/s00146-023-01710-4. 10.1007/s00146-023-01710-4
26
Dwivedi, Y. K., N. Kshetri, L. Hughes, E. L. Slade, A. Jeyaraj, A. K. Kar, A. M. Baabdullah, A. Koohang, V. Raghavan, M. Ahuja, H. Albanna, M. A. Albashrawi, A. S. Al-Busaidi, J. Balakrishnan, Y. Barlette, S. Basu, I. Bose, L. Brooks, D. Buhalis, and R. Wright, 2023, "So what if ChatGPT wrote it?" multidisciplinary perspectives on opportunities, challenges and implications of generative conversational AI for research, practice and policy, International Journal of Information Management 71: 102642. 10.1016/j.ijinfomgt.2023.102642
27
Feldhoff, T., 2013, Shrinking communities in Japan: community ownership of assets as a development potential for rural Japan?, URBAN DESIGN International 18(1): 99-109. 10.1057/udi.2012.26
28
Haase, A., M. Bernt, K. Großmann, V. Mykhnenko, and D. Rink, 2016, Varieties of shrinkage in European cities, European Urban and Regional Studies 23(1): 86-102. 10.1177/0969776413481985
29
Hill-Yardin, E. L., M. R. Hutchinson, R. Laycock, and S. J. Spencer, 2023, A Chat(GPT) about the future of scientific publishing, Brain, Behavior, and Immunity 110: 152-154. 10.1016/j.bbi.2023.02.02236868432
30
Hosseini, M., L. M.. Rasmussen, and D. B. Resnik, 2023, Using AI to write scholarly publications, Accountability in Research 1-9. 10.1080/08989621.2023.2168535
31
Jeon, Y., and S. Kim, 2020, Housing abandonment in shrinking cities of East Asia: Case study in Incheon, South Korea, Urban Studies 57(8): 1749-1767. 10.1177/0042098019852024
32
Kim, J., and J. Lee, 2023, How does ChatGPT introduce transport problems and solutions in North America?, Findings 1-6. 10.32866/001c.72634
33
Kocoń, J., I. Cichecki, O. Kaszyca, M. Kochanek, D. Szydło, J. Baran, J. Bielaniewicz, M. Gruza, A. Janz, K. Kanclerz, A. Kocoń, B. Koptyra, W. Mieleszczenko-Kowszewicz, P. Miłkowski, M. Oleksy, M. Piasecki, Ł. Radliński, K. Wojtasik, S. Woźniak, and P. Kazienko, 2023, ChatGPT: Jack of all trades, master of none, Information Fusion 99: 101861 10.1016/j.inffus.2023.101861
34
Liu, Y., F. Zhang, S. Yang, and J. Cao, 2023, Self-attention mechanism for dynamic multi-step ROP prediction under continuous learning structure, Geoenergy Science and Engineering 229: 212083. 10.1016/j.geoen.2023.212083
35
Lund, B. D., T. Wang, N. R. Mannuru, B. Nie, S. Shimray, and Z. Wang, 2023, ChatGPT and a new academic reality: Artificial Intelligence-written research papers and the ethics of the large language models in scholarly publishing, Journal of the Association for Information Science and Technology 74(5): 570-581. 10.1002/asi.24750
36
McGee, R. W., 2023, What will the United States look like in 2050? A chatgpt short story, SSRN Electronic Journal 1-5. 10.2139/ssrn.4413442
37
Nature Machine Intelligence, 2023, The AI writing on the wall, Nature Machine Intelligence 5(1): 1-1. 10.1038/s42256-023-00613-9
38
Nature, 2023, Tools such as ChatGPT threaten transparent science; here are our ground rules for their use, Nature 613(7945): 612-612. 10.1038/d41586-023-00191-136694020
39
Newsham, N., and F. Rowe, 2023, Understanding trajectories of population decline across rural and urban Europe: A sequence analysis, Population, Space and Place 29(3): e2630. 10.1002/psp.2630
40
Perkel, J. M., 2023, Six tips for better coding with ChatGPT, Nature 618(7964): 422-423. 10.1038/d41586-023-01833-037277596
41
Stokel-Walker, C., and R. Van Noorden, 2023, What ChatGPT and generative AI mean for science, Nature 614(7947): 214-216. 10.1038/d41586-023-00340-636747115
42
Teubner, T., C. M. Flath, C. Weinhardt, W. van der Aalst, and O. Hinz, 2023, Welcome to the era of ChatGPT et al., Business & Information Systems Engineering 65(2): 95-101. 10.1007/s12599-023-00795-x
43
Thorp, H. H., 2023, ChatGPT is fun, but not an author, Science 379(6630): 313. 10.1126/science.adg787936701446
44
Tsigaris, P., and J. A. Teixeira da Silva, 2023, Can ChatGPT be trusted to provide reliable estimates?, Accountability in Research 1-3. 10.1080/08989621.2023.217991936786391
45
Wirth, P., V. Elis, B. Müller, and K. Yamamoto, 2016, Peripheralisation of small towns in Germany and Japan-Dealing with economic decline and population loss, Journal of Rural Studies 47: 62-75. 10.1016/j.jrurstud.2016.07.021
Information
  • Publisher :The Korean Association of Professional Geographers
  • Publisher(Ko) :국토지리학회
  • Journal Title :국토지리학회지
  • Journal Title(Ko) :THE GEOGRAPHICAL JOURNAL OF KOREA
  • Volume : 57
  • No :4
  • Pages :477-490
  • Received Date : 2023-09-21
  • Revised Date : 2023-12-15
  • Accepted Date : 2023-12-18
  • DOI :https://doi.org/10.22905/kaopqj.2023.57.4.9
Journal Informaiton 국토지리학회지 국토지리학회지
Online Submission
  • NRF
  • KISTI Current Status
  • KISTI Cited-by
  • KCI 문헌 유사도 검사
  • orcid
  • open access
  • ccl
Journal Informaiton Journal Informaiton - close