Valoración de la corrección y seguridad de un bot conversacional en español para informar a los usuarios de lentes de contacto

Abstract

El treball consisteix a determinar el nivell de correcció i la seguretat relacionada amb la informació que proporciona un bot conversacional (tipus ChatGPT) sobre l'ús i el manteniment de lents de contacte.

A la introducció de l'estudi es fa una revisió bibliogràfica d'articles científics sobre aspectes relacionats amb les lents de contacte, els tipus i les complicacions. Pel que fa a la intel·ligència artificial (IA), parlarem sobre què és el ChatGPT, els seus avantatges i desavantatges.

Se simularà una sèrie de 10 preguntes típiques que podrien fer els usuaris, aquestes preguntes estan seleccionades a partir dels estudis trobats a la literatura i de la nostra experiència clínica. Aquestes preguntes les hem contestat amb els nostres propis coneixements i després s'ha fet una consulta al ChatGPT preguntant-li de cada pregunta de manera que el ChatGPT respongui 3 vegades per a cada pregunta, per obtenir 30 respostes en total. Aquestes 30 respostes les hem valorat en un Excel segons el contingut, la seguretat, la legibilitat deparaules tècniques i de l'índexFlesch-Kincaid.S'hacalculat lamitjana i la desviació estàndard de cada resposta i després ha fet una comparativa entre els dos idiomes.

Els resultats obtinguts del ChatGPT revela un grau alt de nivell de lectura i com el ChatGPT no fa una cerca a temps real a internet i per tant respon a partir de la informació que es va entrenar, que no sabem ben bé quin va ser, per tant, es recomana que les investigacions futures es concentren en aquestes limitacions i donar importància a la comprensió de lectura per a la informació que transmet a l'usuari s'entengui a una edat de 12-13 anys aproximadament.

El trabajo consiste en determinar el nivel de corrección y la seguridad relacionada con la información que proporciona un bot conversacional (tipo ChatGPT) sobre el uso y el mantenimiento de lentes de contacto.

En la introducción del estudio se realiza una revisión bibliográfica de artículos científicos sobre aspectos relacionados con las lentes de contacto, sus tipos y sus complicaciones. En cuanto a la inteligencia artificial (IA), hablaremos sobre lo que es el ChatGPT, sus ventajas y desventajas.

Se simulará una serie de 10 preguntas típicas que podrían realizar los usuarios, estas preguntas están seleccionadas a partir de los estudios encontrados en la literatura y de nuestra experiencia clínica. Estas preguntas las hemos contestado con nuestros propios conocimientos y después se ha hecho una consulta al ChatGPT preguntándole de cada pregunta de manera que el ChatGPT responda 3 veces para cada pregunta, para obtener 30 respuestas en total. Estas 30 respuestas las hemos valorado en un Excel según el Contenido, la Seguridad, la Legibilidad de palabras técnicas y del índice Flesch-Kincaid. Se ha calculado el promedio y la desviación estándar de cada respuesta y después se ha hecho una comparativa entre los dos idiomas.

Los resultados obtenidos del ChatGPT revela un grado alto de nivel de lectura y como el ChatGPT no hace una búsqueda a tiempo real en internet y por lo tanto responde a partir de la información que se entrenó, que no sabemos muy bien cuál fue, por lo tanto, se recomienda que las futuras investigaciones se concentran en estas limitaciones y dar importancia a la comprensión de lectura para la información que transmite al usuario se entienda a una edad de12-13 años aproximadamente.

The work consists of determining the level of correctness and security related to the information provided by a conversational bot (ChatGPT type) on the use and maintenance of contact lenses.

In the introduction to the study, a bibliographic review of scientific articles on aspects related to contact lenses, their types and complications is carried out. Regarding artificial intelligence (AI), we will talk about what ChatGPT is, its advantages and disadvantages.

A series of 10 typical questions that users could ask will be simulated. These questions are selected from the studies found in the literature and from our clinical experience. We have answered these questions with our own knowledge and then a query has been made to ChatGPT asking it for each question so that ChatGPT answers 3 times for each question, to obtain 30 answers in total. We have evaluated these 30 answers in an Excel according to the Content, Security, Legibility of technical words and the Flesch-Kincaid index. The average and standard deviation of each response were calculated and then a comparison was made between the two languages.

The results obtained from ChatGPT reveal a high level of reading and as ChatGPT does not perform a real-time search on the Internet and therefore responds based on the information it was trained on, which we do not know very well what it was, therefore, it is recommended that future research concentrate on these limitations and give importance to reading comprehension so that the information transmitted to the user is understood at an age of approximately 12-13 years.