데이터 클라우드 기업 스노우플레이크는 온라인으로 진행된 '스노우데이 2023'를 통해 자사의 데이터 클라우드 플랫폼에서 AI/ML 관련 기술 지식이 없이도 쉽고 안전하게 생성AI를 활용할 수 있는 완전 관리형 서비스 스노우플레이크 코텍스(Cortex)를 발표했다.

스노우플레이크 코텍스는 메타(Meta) AI의 Llama 2와 같은 LLM, 태스크 특화 모델, 고급 벡터 검색 기능, 서버리스 함수 세트에 바로 액세스할 수 있도록 지원한다. 이를 기반으로 고객들은 분석 속도를 높이고, 컨텍스트화된 LLM 기반의 앱을 수분 만에 구축할 수 있다. 이와 더불어 스노우플레이크는 코텍스를 활용한 문서의 자연어 처리와 관리를 가능하게 하는 도큐먼트AI(Document AI), LLM 어시스턴트 스노우플레이크 코파일럿(Copilot), LLM 기반 검색 유니버설 서치(Universal Search)를 프라이빗 프리뷰 형태로 공개했다.

완전 관리형 서비스인 스노우플레이크 코텍스는 고객들이 AI 전문 지식 또는 GPU 기반 인프라 관리 없이도 LLM과 AI를 쉽게 활용할 수 있도록 필요한 구성 요소를 제공한다. SQL 혹은 파이썬 코드의 함수 호출에서 사용할 수 있는 서버리스 함수 세트가 포함되며 함수 세트는 계속해서 추가될 예정이다.

스노우플레이크 코텍스 비용 효율성이 뛰어난 언어 모델과 AI 모델을 활용하는 태스크 특화 함수 세트인 특수 함수를 이용해  분석 작업 속도를 높인다. 이 모델을 사용하면 주어진 입력 텍스트의 감성 정보 파악, 답변 도출, 텍스트 요약, 선택한 언어로의 번역 등이 가능하며, 특수 함수에는 예측, 이상 감지, 기여 탐색, 분류 등 스노우플레이크가 제공하는 기존 머신러닝 기반 함수도 포함된다.

Llama 2 모델 등 업계 주요 오픈소스 LLM과 텍스트-SQL 변환(text-to-SQL) 모델 등의 고성능 스노우플레이크 LLM을 활용한 대화형 함수 세트인 범용 함수는 폭넓은 사용 사례를 지원하고 있어 사용자가 데이터와 쉽게 ‘대화’할 수 있게 된다. 이 함수에는 벡터 임베딩과 검색 기능도 포함돼 있다. 따라서 사용자는 데이터를 활용해 모델의 응답을 컨텍스트화하고 사용자 맞춤형 앱을 수분 만에 생성할 수 있다. 또한 스노우플레이크 데이터 클라우드 내에 벡터를 네이티브 데이터 유형으로 추가할 수 있어 효과적으로 활용할 수 있도록 지원한다.

스노우플레이크 스트림릿(Streamlit)도 LLM을 기반으로 한 사용자 맞춤형 앱을 빨리 구축하는 데 활용되고 있다. 스트림릿을 통해 파이썬 기반의 인터랙티브 앱으로 만들어 데이터와 AI 모델, 분석, 앱 기능을 구현할 수 있다.

완전 맞춤형 LLM 앱을 개발하고자 하는 고급 사용자는 스노우플레이크 스노우파크 컨테이너 서비스를 사용해 컨테이너화된 워크로드의 안전한 배포와 관리를 간편하게 수행할 수 있다. 스노우파크 컨테이너 서비스는 개발자가 상용 LLM 서비스와 벡터 데이터베이스 등의 정교한 타사 앱을 스노우플레이크 계정 내에서 실행할 수 있도록 하며, 조직은 데이터 클라우드 내에서 오픈소스 LLM을 손쉽게 배포하고 운영, 관리할 수 있다.

스노우플레이크는 스노우데이 2023을 통해 개발자가 데이터 클라우드에서 머신머닝 모델과 풀스택 앱을 손쉽게 구축할 수 있도록 하는 발전 방향과 함께, 데이터 사일로를 제거하고 스노우플레이크의 주요 규정 준수 및 거버넌스 기능을 강화하는 개선 사항 등을 발표했다.

이번 행사에서는 스노우플레이크 코텍스 외에도 고객이 자체 스토리지를 관리하면서도 스노우플레이크의 손쉬운 관리와 뛰어난 성능을 활용할 수 있도록 오픈 테이블 포맷인 아이스버그(Iceberg) 기능을 강화했으며, 더욱 강력해진 거버넌스 모델인 ‘스노우플레이크 호라이즌(Horizon)’을 통해 점점 복잡해지는 데이터 생태계를 간편하게 관리할 수 있도록 지원한다고 밝혔다. 더욱 강화된 거버넌스에는 클라우드 간 보안과 규정 준수 모니터링을 한 곳에 통합하는 트러스트 센터(Trust Center)와 한국 금융보안원의 규정 준수 인증 내용도 포함돼 있다.

또한 파이썬 개발자가 스노우파크를 쉽게 활용할 수 있도록 새로운 개발 인터페이스 도구 ‘스노우플레이크 노트북(Notebooks), 스노우파크 ML 모델링 API 등이 공개됐으며, 스노우파크 레지스트리를 업데이트했다. 이를 통해 개발자들은 컨테이너화된 워크로드와 확장된 데브옵스(DevOps)로 스노우플레이크의 관리형 인프라 내에서 앱을 빠르게 개발하고 실행할 수 있게 했다.

슈리다 라마스워미(Sridhar Ramaswamy) 스노우플레이크 AI 부문 SVP는 “스노우플레이크는 고객들이 데이터의 안전성과 거버넌스를 확보하고 강력한 AI/ML 앱을 구축하는 데 필요한 데이터 기반과 AI의 최신 구성 요소를 제공해 AI 혁신 선두 주자가 될 수 있도록 지원하고 있다”며, “스노우플레이크 코텍스는 생성AI를 활용해 사용자 맞춤형 앱을 구축하거나 데이터를 기반으로 비즈니스 가치를 창출하도록 할 것”이라고 말했다.

[알림] GTT KOREA의 동영상 마케팅 플랫폼 GTT SHOW는 오는 11월 29일 수요일 오후 2시부터 오후 3시까지 “복잡한 제조 산업 환경을 간소화·효율화하는 ‘혁신적인 뉴랜드코리아 스캐너’ 활용법”을 주제로 무료 온라인 세미나를 진행한다. AI기능을 탑재한 핸드헬드 바코드 스캐너, 고정 매립형 스캐너, 모바일 컴퓨터, 웨어러블 스캐너까지 다양한 제조 현장의 운영효율과 생산성을 높이는 스캐너 신기술과 자세한 활용법이 소개된다.

[알림] GTT KOREA의 동영상 마케팅 플랫폼 GTT SHOW는 오는 12월 14일 목요일 오후 2시부터 오후 3시까지 “기업의 데이터 중심 성과향상과 의사결정 효율 높이는 '전사 기업성과관리' 전략”을 주제로 무료 온라인 세미나를 진행한다. 기업의 다양한 성과 지표의 측정과 분석, 경영계획, 이동계획, 차이 및 변수 별 분석 등 경영 의사결정을 돕고 경쟁력을 강화하는 기업성과관리(CPM) 솔루션 및 ERP와 함께 운용했을 때의 장점과 실제 도입 사례를 통해 전사 CPM과 경영계획 프로세스를 개선하는 전략과 활용법이 소개된다.