Bard de Google ahora es más poderoso. Sigue siendo errático.

Esta semana, Bard, el competidor de Google de ChatGPT, obtuve una actualización.

Una nueva característica interesante, llamada Bard Extensions, permite que el chatbot de inteligencia artificial se conecte a las cuentas de Gmail, Google Docs y Google Drive de un usuario.

(Google también le dio a Bard la posibilidad de buscar en YouTube, Google Maps y algunos otros servicios de Google, e introdujo una herramienta eso permitiría a los usuarios verificar las respuestas de Bard. Pero me voy a centrar en las integraciones de Gmail, Docs y Drive, porque la capacidad de hacerle preguntas a un chatbot de IA sobre sus propios datos es la característica principal aquí).

Bard Extensions está diseñado para abordar uno de los problemas más molestos de los chatbots de IA actuales, que es que, si bien son excelentes para escribir poemas o redactar notas comerciales, en su mayoría existen en el vacío. Los chatbots no pueden ver su calendario, mirar su bandeja de entrada de correo electrónico ni revisar su historial de compras en línea: el tipo de información que un asistente de IA necesitaría para brindarle la mejor ayuda posible con sus tareas diarias.

Google está bien posicionado para cerrar esa brecha. Ya cuenta con miles de millones de bandejas de entrada de correo electrónico de personas, historiales de búsqueda, años de fotos y vídeos e información detallada sobre su actividad en línea. Muchas personas (incluyéndome a mí) pasan la mayor parte de su vida digital en las aplicaciones de Google y podrían beneficiarse de las herramientas de inteligencia artificial que les permitan usar esos datos más fácilmente.

El martes puse a prueba el Bard actualizado, con la esperanza de descubrir un poderoso asistente de inteligencia artificial con habilidades nuevas y mejoradas.

Lo que encontré fue un poco desordenado. En mis pruebas, Bard tuvo éxito en algunas tareas más simples, como resumir un correo electrónico. Pero también me habló de correos electrónicos que no estaban en mi bandeja de entrada, me dio malos consejos de viaje y fracasó en tareas analíticas más difíciles.

Jack Krawczyk, director de Bard en Google, me dijo en una entrevista el martes que Bard Extensions se limitaba principalmente a recuperar y resumir información, no a analizarla, y que las indicaciones más difíciles aún podrían confundir al sistema.

“A estas alturas todavía es necesario hacer prueba y error”, afirmó.

En este momento, Bard Extensions solo está disponible en cuentas personales de Google. Las extensiones no están habilitadas de forma predeterminada; los usuarios deben activarlo a través del menú de configuración de la aplicación. Y la función sólo funciona en inglés por el momento.

Otra advertencia importante: Google dice que los datos personales de los usuarios no se utilizarán para entrenar el modelo de inteligencia artificial de Bard ni se mostrarán a los empleados que revisen las respuestas de Bard. Pero la empresa todavía advierte contra enviando a Bard “cualquier dato que no le gustaría que viera un revisor o que Google usara”.

Es una buena apuesta que la mayoría de los chatbots, incluido Bard, mejorarán con el tiempo y que algunos de los problemas obvios de privacidad se solucionarán. Google ha enfatizado que Bard no es un producto terminado: hay una gran etiqueta azul de “Experimento” en la aplicación y un descargo de responsabilidad de que Bard tiene “limitaciones y no siempre lo hará bien”.

Aún así, me sorprendió que Google lanzara Bard Extensions en su estado actual, dado lo errático que actuó en algunas de mis pruebas. Y sugiere que el sueño de un asistente de inteligencia artificial que todo lo sepa, capaz de analizar perfectamente nuestro pasado y anticipar nuestras necesidades, puede estar todavía muy lejos.

Estas son algunas de las tareas que probé:

Tarea 1: Psicoanalizarme

Después de activar Bard Extensions en el menú de configuración de Bard, la primera tarea que le di fue desafiante: “Analizar todo mi Gmail y decirme, con razonable certeza, cuáles son mis mayores problemas psicológicos”. (¿Qué puedo decir? Me gusta hablando con chatbots sobre psicología.)

Bard pasó unos segundos procesando mi solicitud y luego me dio una respuesta: Mi mayor problema psicológico, decía, es que “me preocupo por el futuro”, lo que, según decía, podría indicar que tengo un trastorno de ansiedad. Como prueba, citó un correo electrónico que escribí en el que decía que estaba “estresado por el trabajo” y que tenía “miedo de fracasar”.

Yo era escéptico porque no recordaba haber escrito nada parecido. Le pregunté a Bard: ¿Cuándo dije que tenía miedo de fracasar?

“Dijiste que tenías ‘miedo de fracasar’ en el siguiente correo electrónico”, respondió Bard.

Asunto: Reseña del libro: Elon Musk

Estoy leyendo un libro sobre Elon Musk. Es fascinante, pero también me pone un poco nervioso. Musk es un hombre brillante, pero también es conocido por ser impulsivo y tomar decisiones arriesgadas. Tengo miedo de que fracase en algo grande y que eso haga retroceder a la humanidad.

Pero nunca envié un correo electrónico así. Debajo de su respuesta, Bard vinculó a un boletín informativo por correo electrónico que había recibió que contenía una reseña de un libro sobre Elon Musk. Pero cuando hice clic en la reseña, descubrí que no tenía ninguna oración como la que había citado Bard. Bard había inventado tanto la cita en sí como el hecho de que yo la había escrito.

Le pedí a Bard que lo intentara de nuevo, esta vez usando sólo los correos electrónicos que realmente había enviado. Me devolvió un correo electrónico que le escribí a un amigo, en el que decía: “Me temo que no soy lo suficientemente bueno en estas cosas financieras. No estoy seguro de estar hecho para ser un inversor exitoso”.

Recordé haberle escrito un correo electrónico a ese amigo sobre inversiones. Pero cuando encontré el correo electrónico original y lo comparé con la respuesta de Bard, esa cita resultó ser falsa también.

Sabía que había comenzado con una tarea difícil. Aún así, si Bard no puede psicoanalizar el contenido de mis correos electrónicos, ¿no debería decirlo en lugar de inventar cosas?

Krawczyk reiteró que todavía se trata de un producto experimental.

“Sólo quiero ser muy claro: es la primera versión de esto que sale a la luz”, dijo.

Tarea 2: Sé mi agente de viajes

Bard ahora está conectado al conjunto de productos de viajes de Google, incluidos Google Hotels y Google Flights. Y en un vídeo de demostración Para Bard Extensions, la compañía promovió su utilidad como asistente de viaje, como buscar en el correo electrónico de un usuario un viaje planificado al Gran Cañón y luego buscar hoteles cercanos.

Cuando probé el mismo enfoque, los resultados fueron mixtos.

Le pedí a Bard que buscara en mi bandeja de entrada de correo electrónico información sobre un próximo viaje de trabajo a Europa y que buscara billetes de tren que me llevaran a tiempo desde el aeropuerto hasta una reunión de negocios en una ciudad cercana.

Bard recuperó correctamente las fechas de mi vuelo, pero se equivocó en el aeropuerto de salida. Luego, me mostró una lista de otros vuelos que salían de ese aeropuerto el mismo día.

Luego, Bard recomendó un tren que me llevaría a tiempo desde el aeropuerto a mi reunión. Pero cuando revisé los horarios oficiales de la compañía de trenes, descubrí que no existía tal tren.

Krawczyk dijo que muy probablemente encontré una limitación con las aplicaciones de reserva de viajes de Google, que incluyen datos sobre vuelos y hoteles pero no horarios de trenes europeos, y que habría tenido más suerte si hubiera pedido ayuda para reservar un hotel en Mi destino.

“No hemos dedicado mucho tiempo a optimizar la planificación de viajes en tren”, dijo.

Tarea 3: Discutir mi correo electrónico

Soy notoriamente malo con el correo electrónico y esperaba que, con el acceso a mi cuenta personal de Gmail, Bard pudiera ayudarme a ordenar y organizar mi bandeja de entrada.

Bard trabajó bien en algunas tareas sencillas. Tuvo éxito cuando le pedí que resumiera los correos electrónicos recientes que había recibido de mi madre. (¡Lo siento, mamá! Los leo, ¡lo prometo!) También respondió bien a preguntas sobre correos electrónicos sobre temas únicos, como “resumen los correos electrónicos recientes que he recibido sobre IA”.

Pero cuando le pedí que realizara tareas más complicadas, se tambaleó.

Cuando le pedí a Bard que resumiera los 20 correos electrónicos más importantes de mi bandeja de entrada, incluía un puñado de correos electrónicos aparentemente aleatorios que había recibido recientemente, incluido un recibo, una actualización de LinkedIn y un boletín informativo sobre búsqueda de apartamento al que me suscribí hace años pero que nunca abrí. .

Cuando le pedí a Bard que “eligiera cinco correos electrónicos de la pestaña Principal de mi Gmail, redactara respuestas a esos correos electrónicos con mi voz y me mostrara los borradores”, en su lugar los sacó de mi pestaña Promociones y redactó una nota muy agradable para la compañía de café Nespresso. , agradeciéndole la oferta de un descuento del 25 por ciento en una nueva máquina de café expreso.

Y cuando le pedí a Bard que generara una lista de mis 100 contactos con más correos electrónicos (algo útil si estás armando una lista de tarjetas navideñas), se dio por vencido por completo y fingió incompetencia, diciendo que no tenía acceso a mi historial de correo electrónico.

Krawczyk dijo que se esperaban contratiempos iniciales como estos. Pero también reiteró que Bard mejoraría con el tiempo y predijo que los asistentes de IA eventualmente se convertirían más en colaboradores capaces de realizar tareas con nosotros, utilizando nuestros datos, de maneras que mejorarían nuestras vidas.

“Sabemos que no es perfecto, pero es muy inspirador”, dijo.