멀티모달 AI

마이크로소프트는 지난 화요일(30일, 현지시각) 오후 4분기 실적을 발표했습니다.양호한 실적이었지만, 시간외 거래에서 주가는 3% 가까이 하락했습니다. 다음 거래일인 오늘(31일, 현지시각)도 주가가 1.08% 내렸죠.   주가 하락의 원인은 클라우드 부문의 실적 부진 때문이었는데요. 클라우드 비즈니스의 매출 성장 둔화와 함께, 인텔리전트 클라우드 부문 매출이 거의 2년 만에 처음으로 월가의 예상치를 하회했습니다. 반면, 금융 리스로 구매한 장비와 현금 자본 지출로 190억 달러라는 큰 금액을 투입한 것으로 확인됐습니다.구글은 어땠을까요? 구글도 양호한 실적을 기록했지만, 투자자들의 시선은 막대한 AI 투자에 쏠렸습니다. 하반기에 지난 5년 평균보다 84% 많은 지출을 할 것이라고 밝혔기 때문입니다. 이처럼 빅테크 기업들의 'AI 지출 전쟁'은 당분간 지속될 것으로 보입니다. 투자자들 사이에서 '돈을 벌지 못 하는 AI 분야에 과도한 투자가 이뤄지는 것은 아닐까'하는 불안함이 생긴 이유입니다. 시장은 생성 AI가 'AI 버블'이 될지, 아니면 진정한 '4차 혁명'이 될지 주목하고 있습니다.<CEO 포커스 29호>에서는 이런 시장 상황을 보다 정확히 파악하기 위해 2024년 상반기 생성 AI 트렌드와 차세대 지능형 멀티모달 AI 트렌드를 살펴봤습니다. 또, AI와 공존하며 잠식되지 않기 위한 통찰력을 제공하는 4권의 책도 소개합니다.

AI기술의 발전이 가속화되면서 멀티모달AI가 주목받고 있다. 멀티모달AI는 텍스트, 이미지, 비디오 등 다양한 형태의 데이터를 동시에 이해하고 처리하는 능력을 가진 AI를 말한다. 인간의 기본적인 감각은 청각, 촉각, 후각, 미각, 시각이다. 사람은 이 다섯 가지 감각을 통해 주변 세계를 인식하고 이해한다. 멀티모달 AI의 목표는 다양한 형식(텍스트, 비디오, 이미지, 오디오 등)의 데이터를 통합해 인간과 유사한 방식으로 작동할 수 있는 시스템을 만드는 것이다. 최종 목표는 인간의 감각 기관의 정보를 디지털 정보로 변환해 AI 시스템에 전달해 통제 및 사용이 가능해지는 것이다. 기기 사용의 접근성을 한층 더 증대해 사용 제한의 한계를 극복하는 방향으로 진화할 것이다.기존 AI 모델이 주로 텍스트나 이미지 등 단일 형태의 데이터에 특화돼 있었다면, 멀티모달AI는 다양한 유형의 데이터를 동시에 처리하고 이해할 수 있다. 이러한 능력은 AI가 보다 복잡하고 다양한 실제 세계의 문제를 해결하는 데 큰 도움이 될 것으로 기대된다.멀티모달AI의 장점으로는 사용자 편의성 증대, 시스템 접근성 확대 (장애인들, Field worker), 사용자 만족도 확대, 서비스 정확도 향상(다양한 형태의 크로스 체크가 가능하기 때문), 시장 선점 가능성 확장, 기반 기술의 성숙으로 인한 빠른 기술 개발이 가능한 점 등이 있다. 이 새로운 AI의 등장은 단순히 기술의 진보를 넘어 AI가 인간의 인지 과정을 더욱 정교하게 모방할 수 있게 되었음을 의미한다. 이는 AI와 인간의 상호작용을 더욱 자연스럽고 효과적으로 만들 뿐만 아니라, 다양한 산업 분야에서 혁신적인 응용 가능성을 제시한다. 멀티모달AI 시장은 이미 빠르게 성장하고 있다. 베를린에 기반을 둔 오픈소스 멀티모달 검색 엔진 스타트업인 지나AI가 예상한 AI의 미래 스펙트럼 그래프에 따르면, AI 산업이 멀티모달AI 시대에 진입했음을 알 수 있다. 또한 KBY 리서치에 따르면, 글로벌 멀티모달AI 시장은 2019년부터 2030년까지 연간 평균 32.2% 속도로 성장해 84억달러(약 11조 5684억원)에 이를 것으로 예상된다.

생성AI 기술 기반으로 독립적인 작업을 수행할 수 있는 ‘AI 에이전트’가 비즈니스를 바꾸고 있다는 라리 하말라이넨 맥킨지 수석 파트너의 분석이다. 그는 “생성 AI 기반 에이전트는 작업 과정(workflow)을 자동화할 수 있는 잠재력이 있다”고 강조했다. 실제 빅테크 및 주요 AI 업체들은 최근 ‘AI 에이전트’를 중요한 키워드로 내세우고 있다. 지난 5월 13일(현지시각)에 진행된 오픈AI의 스프링 업데이트, 14일에 열린 구글 I/O, 21일에 있었던 마이크로소프트(MS) 빌드까지 모든 행사에서 공통적으로 AI 에이전트가 언급됐다. 주요 AI 기술 업체들이 AI 에이전트를 강조하는 이유는 무엇일까? 이 트렌드 이면에서는 어떤 물밑 경쟁이 벌어지고 있을까. GPT-4 공개 후 1년가량 흐른 현재, 빠르게 변화하고 있는 생성 AI 산업의 지형도를 살펴봤다. 

‘마이크로소프트(1위), 엔비디아(4위), 메타(7위), TSMC(10위)...’글로벌 투자시장에서 AI 기업들이 주목받고 있다. AI를 전면에 앞세운 ‘AI 퍼스트’ 기업들이 강력한 주가 상승을 보여주며 글로벌 시가총액 상위권 순위를 흔들고 있는 것이다. 미국 시장 시가총액 3위, 글로벌 4위에 오른 엔비디아가 대표적인 예다. 마이크로소프트는 2010년대 이후 시가총액 1위 자리를 지켰던 애플을 밀어냈고, 메타 역시 AI 분야에 더 공격적으로 투자하며 2023년 이후 가파른 상승세를 보여주고 있다. 세계 1위 파운드리(반도체 위탁 생산) 전문 기업 TSMC는 AI 반도체 붐에 힘입어 최근 테슬라를 밀어내고 글로벌 시가총액 10위에 올랐다.

“(포스트잇에 그린 그림을 보며) 새처럼 보이네요. (추가로 물결 표시를 그려 넣자) 새가 물에서 수영하고 있네요. 긴 목과 부리를 보니 오리가 틀림없어요!”뷰스레터 구독자 여러분 안녕하세요. 박원익입니다. 구글이 6일(현지시각) 공식 발표한 차세대 AI 모델 ‘제미나이(Gemini)’ 시연 영상 중 한 장면입니다. 더밀크는 구글의 공식 발표 하루 전날인 5일(현지시각) 오후 화상으로 진행된 글로벌 기자간담회에 참석, 이 영상을 처음 확인했는데요. 6분 남짓 진행된 시연을 보며 ‘정말 새로운 세상이 열리는구나’라는 생각을 하게 됐습니다. 제미나이는 ‘쌍둥이 자리’를 뜻하죠. 인간과 AI가 쌍둥이(twins)란 의미를 담고 있습니다. 구글은 제미나이를 통해 인간을 닮은 AI를 만들려 합니다. 사람처럼 주어진 다양한 정보를 종합해 ‘연속적인 생각(Chain of Thought, CoT)’을 할 수 있다는 걸 보여줬습니다.