데이터브릭스, 신뢰 가능한 AI 에이전트 구축 도구 공개

데이터브릭스는 AI 에이전트를 대규모 운영 환경에 도입할 수 있도록 지원하는 새로운 도구를 18일 공개했다.

현재 전 세계 기업의 85%가 생성형 AI를 사용하고 있지만, 가장 발전된 모델도 기업별 데이터에 대한 이해 부족으로 인해 비즈니스에 특화된 체계적인 결과를 제공하는 데 어려움을 겪고 있다.

데이터브릭스의 새 도구는 기업이 AI 에이전트를 비즈니스에 필수적인 고부가가치 애플리케이션에 도입할 수 있도록 지원하며, 정확성과 거버넌스를 보장하고 사용 편의성을 높이는 데 초점을 맞췄다.

새 도구는 AI 모델에 대한 중앙 집중식 거버넌스를 구현한다. 오픈소스 및 상업용 등 모든 AI 모델을 한 곳에서 관리할 수 있고, 모자이크 AI 게이트웨이를 통해 맞춤형 대규모 언어 모델(LLM) 공급자를 활용할 수 있다. 이를 통해 모델 전반에 걸쳐 일관된 거버넌스, 모니터링 및 통합 기능을 제공한다.

기존 애플리케이션 워크플로우와 쉽게 통합할 수 있다. AI/BI 지니 대화형 API 스위트는 개발자가 자연어 기반 챗봇을 맞춤형 애플리케이션이나 마이크로소프트 팀즈, 쉐어포인트, 슬랙과 같은 인기 있는 생산성 도구에 직접 통합할 수 있도록 한다. 지니 API를 통해 사용자는 프로그래밍 방식으로 프롬프트를 제출하고, 지니 UI와 동일한 인사이트를 얻을 수 있다. API는 상태를 유지(Stateful)하므로 대화 스레드 내에서 여러 후속 질문에 걸쳐 대화의 문맥을 유지할 수 있다.

휴먼 인 더 루프(인간개입) 워크플로우를 간소화한다. 업그레이드된 에이전트 평가 리뷰 앱은 도메인 전문가가 AI 에이전트의 성능을 보다 손쉽게 평가하고, 맞춤형 피드백을 제공하며, 라벨링을 위해 추적을 보내고, 평가 기준을 사용자 맞춤화 할 수 있도록 지원한다. 전문가는 엑셀 스프레드시트나 별도의 맞춤형 애플리케이션 없이도 체계적인 피드백을 효율적으로 수집할 수 있어, AI 성능을 지속적으로 개선하고 정확도를 체계적으로 향상시키는데 기여한다. 특히, 실제 운영 환경에서 AI 에이전트의 성능을 평가하는 데 소요되는 많은 시간과 노력을 줄여준다.

프로비저닝 없는 배치 추론이 가능하다. 고품질 AI 에이전트를 구축하려면 모델 선택, 거버넌스, 평가가 필수적이지만, 기술을 원활하게 확산하려면 사용 경험을 단순화하는 것도 중요하다. 이번에 새롭게 추가된 기능을 통해 모자이크 AI에서 단일 SQL 쿼리만으로 배치 추론을 실행할 수 있으며, 별도의 인프라 설정없이도 비정형 데이터를 원활하게 통합할 수 있다.

크레이그 와일리 데이터브릭스 AI/ML 제품 담당 수석 디렉터는 “여전히 많은 기업이 AI 에이전트를 고부가가치 활용 사례에 도입하는 데 어려움을 겪고 있다”며 “이는 정확성, 거버넌스, 보안에 대한 우려 때문”이라고 설명했다.

그는 “이러한 기업에게 가장 큰 장애물은 기술 자체가 아니라, AI를 신뢰할 수 있는지에 대한 확신”이라며 “이번에 새롭게 발표된 도구들은 이러한 문제를 정면돌파함으로써, 기업이 시범 단계를 넘어 신뢰할 수 있는 AI 에이전트를 본격적인 운영 환경에 도입할 수 있도록 지원할 것”이라고 강조했다.

모자이크 AI 게이트웨이, 지니 대화형 API 스위트, 에이전트 평가 리뷰 앱, 배치 AI는 공개 미리보기 버전으로 현재 이용 가능하다.

글. 바이라인네트워크
<김우용 기자>yong2@byline.network