Baba опубликовала бенчмарк для оценки ИИ в координации медицинского ухода

Baba использует ИИ, сохраняя человеческий формат сервиса. Компания проверяет, насколько открытые и закрытые модели справляются с задачами координации ухода: например, с оформлением продовольственных пособий, проверкой доходов, управлением лекарствами и решением транспортных вопросов.

По словам CEO Коннора Суини, опубликованный компанией бенчмарк Baba Bench показал, что ИИ успешно выполняет многие задачи, но всё ещё допускает ошибки. В частности, модели могут раскрывать слишком много информации; в медицинском контексте это, по его словам, может иметь серьёзные последствия, включая риск потери страховки. Бенчмарк размещён на сайте calmbaba.com/bench. Суини сказал, что продвижение моделей было бы полезно Baba, но не является намеренной стратегией компании.