Databricks launches AI agent for legacy SQL migration

개요

Databricks가 legacy SQL 마이그레이션을 지원하기 위해 AI 기반 코드 변환 기능을 Lakebridge 툴킷에 추가했습니다.

주요 내용

* AI 에이전트 기반 코드 변환: Genie Code를 활용하는 에이전트형 코드 변환 기능으로, 복잡한 SQL 스크립트를 Databricks lakehouse 환경으로 효율적으로 이전합니다.
* 복잡한 코드의 자동화된 처리: AI 서브 에이전트가 소스 코드 분석, 병렬 파일 변환, 변환된 SQL 검증, 실패 구간 자동 재시도 등의 작업을 수행합니다.
* 기존 transpiler 대비 개선점: BladeBridge (패턴 기반) 및 Morpheus (컴파일러 기반)와 같은 기존 transpilation 엔진에 AI의 '추론' 레이어를 추가하여 단순 구문 매핑을 넘어 복잡한 로직 처리 능력을 강화했습니다. 특히, 제어 흐름, 커서, 동적 SQL 등 플랫폼별로 상이한 복잡한 요소들을 효과적으로 다룹니다.
* 기업별 맞춤형 마이그레이션: 개발자가 고유한 기업 SQL 구조에 대한 특정 마이그레이션 규칙을 설정할 수 있어 높은 수준의 사용자 정의가 가능합니다.
* 현재 제한 사항 및 고려 사항:
* 베타 단계로, 한 번에 300개의 파일로 변환 작업이 제한됩니다.
* 대규모 시스템의 경우 여러 번의 실행과 수동 체크포인트가 필요합니다.
* 수동 수정을 재사용 가능한 규칙으로 만들어 AI에 적용하는 '맞춤형 마이그레이션 기술' 기능이 제공됩니다.
* SQL 변환은 현대화 과정의 일부이며, 데이터 재화, 복잡한 종속성 순서 지정, 비즈니스 승인 등 다른 단계는 별도의 관리가 필요합니다.
* 경쟁 환경: Databricks는 Snowflake의 SnowConvert, Google Cloud의 Database Migration Service (Gemini 기반)와 같이 AI를 활용하여 고객의 데이터 플랫폼 이전을 용이하게 하는 업계 트렌드에 참여하고 있습니다.

시사점

Databricks의 새로운 AI 에이전트는 legacy SQL 스크립트 변환에 소요되는 시간을 압축하여 프로젝트 병목 현상을 해소하고, IT 리더십에 대한 프로젝트 타임라인 단축 및 전문 노동 비용 절감이라는 이점을 제공합니다.