Оцінка ефективності застосування сервісів «ChatGPT» та «Google» для наукового пошуку

Автор(и)

  • Д.Ю. Манько Інститут проблем реєстрації інформації НАН України, Україна
  • Є.В. Беляк Інститут проблем реєстрації інформації НАН України, Україна
  • А.А. Крючин Інститут проблем реєстрації інформації НАН України, Україна
  • О.В. Євтушевська Київський університет імені Бориса Гринченка, Україна

DOI:

https://doi.org/10.35681/1560-9189.2024.26.2.316735

Ключові слова:

велика мовна модель, метакогнітивне саморегульоване навчання, пошукова система, ChatGPT, сервіси Google, час затримки, аналіз запиту

Анотація

Проведено порівняльний аналіз ефективності застосування онлайн-сервісу «ChatGPT», що базується на великій мовній моделі та механізмах адаптації для ведення діалогів природними мовами, а також пошукової системи «Google Search Engine». Цільовими показниками порівняльного аналізу слугували швидкодія, точність і користувацький досвід при пошуку інформації у рамках проведення наукового дослідження. На основі наборів даних, що представляють результати виконання зазначеними онлайн-сервісом і пошуковою системою серії запитів було досліджено продуктивність роботи в режимі діалогової взаємодії. За тестові завдання було обрано завдання аналізу азіатського ринку світлодіодів і сучасного стану досліджень технологій, що базуються на використанні джерел ближнього інфрачервоного випромінювання. Проведено порівняння за цільовими показниками, що представлені на кількісному рівні, зокрема, за часом обробки вхідного запиту, відповідністю результатів виконання поставленому запиту, а також індивідуальним досвідом користувачів. Це надало можливість виділити сильні та слабкі сторони онлайн-сервісу «ChatGPT» і пошукової системи «Google Search Engine», а також сформувати методологічні рекомендації щодо їхнього використання в науковому пошуку. Зазначено, що онлайн-сервіс «ChatGPT» ефективно виконує запити, які сформовано за принципами природної мови, як таку в рамках дослідження було обрано англійську. Індивідуальний досвід користувачів вказує на високий рівень персоналізованої взаємодії при роботі з «ChatGPT», що сприяє ефективності роботи при роботі над науковим проектом на етапах наукового пошуку, аналізу даних і підготовки результатів наукового дослідження. Було вказано на значні переваги у використанні механізму «ChatGPT 4.0» над «ChatGPT 3.5» за об’ємом, релевантністю та структурованістю відповіді. Натомість, пошукова система «Google Search Engine» характеризується високими показниками точності, актуальності та об’єму наукових даних, але робота із зазначеним онлайн-сервісом при цьому потребує від дослідника відповідної кваліфікації. Табл.: 4. Іл.: 3. Бібліогр.: 16 найм.

Посилання

Giordano, V., Spada, I., Chiarello, F., & Fantoni, G. The impact of CHATGPT on human skills: A quantitative study on Twitter data. Technological Forecasting and Social Change. 2024. No. 203. pp. 1–24. doi: 10.1016/j.techfore.2024.123389

Benichou, L. The role of using CHATGPT AI in Writing Medical Scientific Articles. Journal of Stomatolog. Oral and Maxillofacial Surgery. 2023. No. 124(5). pp. 45–60. doi: 10.1016/j.jormas.2023.101456

Cai J., Yuan Y., Sui X., Lin Y., Zhuang K., Xu Y., Zhang Q., Ukrainczyk N. & Xie T. Chatting about chatgpt: How does CHATGPT 4.0 perform on the understanding and design of cementitious composite? Construction and Building Materials. 2024. No. 425. pp. 59–65. doi: 10.1016/j.conbuildmat.2024.135965

Dahri N.A., Yahaya N., Al-Rahmi W.M., Aldraiweesh A., Alturki U., Almutairy S., Shutaleva A. & Soomro R.B. Extended Tam based acceptance of ai-powered chatgpt for supporting metacognitive self-regulated learning in education: A mixed-methods study. Heliyon. 2024. No. 10(8). p. 1-21. doi: 10.1016/j.heliyon.2024.e29317

Jiang H., Xia S., Yang Y., Xu J., Hua Q., Mei Z., Hou Y., Wei M., Lai L., Li N., Dong Y. & Zhou J. Transforming free-text radiology reports into structured reports using ChatGPT: A study on thyroid ultrasonography. European Journal of Radiology. 2024. No. 175. pp. 11-28. doi: 10.1016/j.ejrad.2024.111458

Urban M., Dechterenko F., Lukavsky J., Hrabalova V., Svacha F., Brom C. & Urban K. ChatGPT Improves Creative Problem-Solving Performance in University Students: An Experimental Study. Computers & Education. 2023. No. 175. p. 31-48. doi: 10.31234/osf.io/9z2tc

Fu M., Yang H., Feng J., Guo W., Le Z., Lande D. & Manko D. Preferential Information Dynamics model for online social networks. Physica A: Statistical Mechanics and Its Applications. No. 506. pp. 993–1005. doi: 10.1016/j.physa.2018.05.017

Joshi N. (2024). Vietnam LED lighting market report by product type (bulb and Tube Light, panel light, street light, Down Light, flood light, and others), application (commercial, residential, institutional, industrial), installation type (new installation, retrofit installation) 2024-2032. Market Research Reports. https://www.researchandmarkets.com/reports/5732550/vietnam-led-lighting-market-report-product-type.

Kavleen Bhatia (2024). Philippines LED Market Report by Product Type (Panel Lights, Down Lights, Street Lights, Tube Lights, Bulbs, and Others), Application (Commercial, Residential, Institutional, Industrial), Installation Type (New Installation, Retrofit Installation) 2024-2032. Market Research Reports. https://www.imarcgroup.com/philippines-led-market#:~:text=Market%20Overview% 3A,11.5%25%20during%202024-2032.

Rohit S. (2024). India led Lighting Market Size. Market Research Company - Mordor IntelligenceTM. https://www.mordorintelligence.com/industry-reports/india-led-lighting-market/market-size.

Scheeren T.W., Schober P., Schwarte L.A. Monitoring tissue oxygenation by near infrared spectroscopy (NIRS): background and current applications. J Clin Monit Comput. 2012. No. 26(4). pp. 79-87. DOI: 10.1007/s10877-012-9348-y

Teng Yi., Ding H., Tian F., Huang L. Measuring human tissue oxygenation with near infrared spectroscopy. Computers & Education. 2018. No. 44. pp. 847-851.

Cao N. & Gao T. Noninvasive Tissue Blood Oxygenation Measurement Based on Near Infrared Spectroscopy (NIRS). 3rd International Conference on Bioinformatics and Biomedical Engineering, Beijing, China. 2009, No. 51. pp. 1-4. DOI: 10.1109/ICBBE.2009.5163118

Cheung A, Tu L., Macnab A., Kwon B.K., Shadgan B. Detection of hypoxia by near-infrared spectroscopy and pulse oximetry: a comparative study. J Biomed Opt. 2022 No. 27(7). pp. 77-001. DOI: 10.1117/1.JBO.27.7.077001

Murkin J.M., Arango M. Near-infrared spectroscopy as an index of brain and tissue oxygenation. Br J Anaesth. 2009. No. 103. pp. 3-13. DOI: 10.1093/bja/aep299

Gelderlan E. (2024). Near infrared spectroscopy introduction theory. Artinis Medical Systems: (F)NIRS devices. https://www.artinis.com/theory-of-nirs.

##submission.downloads##

Опубліковано

2024-11-19

Номер

Розділ

Інформаційно-аналітичні системи обробки даних