#아이템 선정 #팀빌딩 #사업전략
‘더 어려운 문제’를 고른 AI 스타트업, 미국에 건너가 1,500억 투자 받기까지 [BOLD]

오는 12월 15일 창업가들이 직접 자기 이야기를 들려주는 BOLD SEOUL 2026이 열립니다. ‘언어 모델의 시대, 5년 동안 영상 AI를 놓지 않은 이유’라는 주제로 트웰브랩스 이재성 대표도 연사로 참여합니다.

>>> 행사 안내 및 참가 신청

 

BOLD SEOUL 2026 : BREAK AWAY 참가 신청

 

2018년 무렵, 트랜스포머 논문을 접한 똑똑한 연구자들은 대부분 텍스트로 뛰어들었습니다. 다음 단어를 잘 예측하는 모델이 훌륭한 AI가 된다는 가설이 빠르게 힘을 얻던 때였죠.

같은 시기, 군에서 함께 AI를 연구하던 20대 선후임들은 반대쪽을 골랐습니다. 영상이었습니다. 자기들끼리도 “더럽게 어렵다”고 부르던 문제였죠. 전역하면 다 같이 대학원에 가자던 계획은 그렇게 창업으로 바뀌었습니다.

그 팀이 지금의 트웰브랩스입니다. 영상을 사람처럼 이해하는 AI를 만드는 이 회사는 올해 7월 NEA와 네이버벤처스가 공동으로 리드한 1억 달러(약 1,500억 원) 규모의 시리즈 B를 마쳤습니다. 아마존이 주요 투자자로 참여했고, 엔비디아와 인덱스벤처스 등이 주주로 함께하고 있어요.

처음부터 순탄했던 건 아닙니다. 한국에는 영상을 이해하는 AI라는 시장 자체가 없었고, 이 비전을 알아봐 줄 투자자도 없었습니다. CTO는 과외로 생활비를 벌고, 대표는 대출을 받아 동료들의 장비를 사고 월급을 줘야 했죠.

모두가 피하던 어려운 문제를 고른 팀은 어떻게 여기까지 올 수 있었을까요.

 

군 복무 시절의 연구에서 1억 달러 시리즈 B까지, 트웰브랩스가 걸어온 길.
군 복무 시절의 연구에서 1억 달러 시리즈 B까지, 트웰브랩스가 걸어온 길.

 

EO는 이태원에 있는 트웰브랩스 오피스를 찾아 이재성 대표, 그리고 이번 시리즈 B를 공동 리드한 네이버벤처스 박용정 파트너와 이야기를 나눴습니다.

 


[아티클 내비게이션]

  1. 군대에서 만난 팀, 가장 어려운 문제를 고르다
  2. 한국에선 시장이 없었다, 그래서 실리콘밸리로
  3. 비결은 없었다, 간절함이 있었을 뿐
  4. 모델 하나가 아니라 영상을 이해하는 시스템을

 

군대에서 만난 팀,
가장 어려운 문제를 고르다

트웰브랩스 공동창업자들은 군 복무 시절 선후임으로 만났습니다. 특수한 환경에서 함께 AI 연구 개발을 하며 대규모 영상을 이해하는 문제와 씨름하던 때였죠.

그 무렵 트랜스포머 논문이 나오면서 이 대표는 생각이 많아졌습니다. 의미 있는 AI 연구를 하려면 결국 규모를 키워야 할 것 같았습니다. 그런데 텍스트 쪽에는 이미 뛰어난 플레이어가 많았던 반면, 영상에서 출발해 지능을 만드는 그룹은 좀처럼 보이지 않았습니다.

왜 하필 어려운 쪽이었을까요. 이 대표는 세상을 잘 이해하는 AI가 진짜 유용하려면, 사람이 세상을 배울 때 받아들이는 신호와 가장 닮은 데이터에서 학습을 시작해야 한다고 봤습니다. 텍스트는 사람이 한 번 정리해 압축한 데이터에 가깝지만, 영상은 사람이 세상을 보고 배우는 그대로의 신호에 가깝다는 것이죠.

“아무도 하고 있지 않고 어렵기 때문에, 언어 모델보다 더 생소하기 때문에 우리만의 유니크한 포지셔닝을 할 수 있지 않을까. 어려워서 더 집착하게 된 것 같아요.”

트웰브랩스가 영감을 얻는 곳도 사람이 영상을 보는 방식입니다. 김연아 선수의 경기를 볼 때 우리는 길게 활주하는 장면은 느긋하게 보다가, 점프를 뛰기 직전에는 확 집중합니다. 이런 주의의 흐름을 데이터 처리에 어떻게 녹여 낼지가 트웰브랩스의 오랜 고민입니다.

이 문제는 로봇과도 맞닿아 있습니다. 로봇이 사람처럼 보고 움직이려면 결국 영상을 제대로 이해해야 하기 때문입니다.

 

군 복무 시절 선후임으로 시작한 트웰브랩스는 이제 서울과 샌프란시스코에서 함께 일하는 팀이 됐다. (출처: 트웰브랩스)
군 복무 시절 선후임으로 시작한 트웰브랩스는 이제 서울과 샌프란시스코에서 함께 일하는 팀이 됐다. (출처: 트웰브랩스)

 

한국에선 시장이 없었다,
그래서 실리콘밸리로

창업 초기 팀은 코로나 시기 미국 액셀러레이터 테크스타스에 원격으로 참여했습니다. 돈이 없었습니다. CTO는 SAT 과외로 생활비를 벌었고, 이 대표는 대출을 받아 공동창업자들의 장비를 사고 월급을 줬습니다.

“그때는 정말 뒤가 없는 행동이죠. 어떻게든 되겠지.”

지금은 모델 하나를 훈련하는 데 1천억 원이 든다고들 하지만, 당시엔 “모델 훈련에 3억을 태웠다”는 말만으로도 놀라던 시절이었습니다. 팀은 테크스타스와 아마존웹서비스(AWS)가 준 클라우드 크레딧까지 끌어모아 첫 영상 검색 모델 ‘마렝고(Marengo)’의 프로토타입을 만들었습니다.

 

트웰브랩스의 영상 검색 API. 찾고 싶은 장면을 문장으로 입력하면 수많은 영상 속에서 해당 구간을 찾아 준다. (출처: 트웰브랩스)
트웰브랩스의 영상 검색 API. 찾고 싶은 장면을 문장으로 입력하면 수많은 영상 속에서 해당 구간을 찾아 준다. (출처: 트웰브랩스)

 

이 모델이 국제 대회의 영상 이해 부문에서 1위를 하면서 길이 열렸습니다. 앤트로픽, 피그마, 노션 등에 투자한 실리콘밸리의 인덱스벤처스가 500만 달러 규모의 시드 라운드를 리드했죠. 언어 모델 다음은 영상이라고 내다본 투자자였습니다.

한국에서는 왜 어려웠을까요. 이 대표는 당시 한국에 이 시장에 대한 이해가 거의 형성되지 않았다고 돌아봅니다. 그래서 기술은 한국에서 만들고, 승부는 실리콘밸리에서 보기로 했습니다.

“한국에서 만들어서 밸리에 가서 어떻게든 싸워서 이겨 보자고 생각했어요.”

네이버와의 인연도 여기서 시작됩니다. 네이버 D2SF도 시드 라운드에 투자 의향을 전했지만, 인덱스벤처스가 라운드를 모두 가져가고 싶어 해 성사되지 못했습니다. 몇 년 뒤 네이버가 실리콘밸리에 세운 네이버벤처스는 첫 투자로 트웰브랩스를 골랐고, 이번 시리즈 B를 공동 리드했습니다.

박용정 파트너는 창업자를 볼 때 세 가지를 본다고 말합니다. 왜 하필 이 사람이 이 문제를 풀어야 하는지, 유행을 좇는 사람인지 문제 자체에 매달리는 사람인지, 그리고 자원이 부족해도 끝까지 해내는 집요함과 체력이 있는지입니다. 그는 이재성 대표가 이 세 가지가 모두 겹치는 드문 창업자라고 판단했습니다.

 


남들이 피한 어려운 문제를 붙잡은 창업가는 이재성 대표만이 아닙니다. 가장 앞선 기술의 빈틈인 AI 보안에서 시장을 찾은 에임인텔리전스 유상윤 대표와 나무 유통 시장에 뛰어든 하버드 출신 루트릭스 안정록 대표도 같은 날 BOLD SEOUL 2026 무대에 섭니다. 남다른 질문으로 새 기준을 만들어 가는 창업가들의 이야기를 직접 들어볼 수 있습니다.

>>> 행사 안내 및 참가 신청


 

비결은 없었다,
간절함이 있었을 뿐

20대 한국인으로 이뤄진 팀은 소프트웨어를 팔아 본 적도, 미디어 업계에서 일해 본 적도 없었습니다. 그런데도 빅테크의 모델을 제치고 할리우드 스튜디오들의 선택을 받았습니다. 비결을 묻자 이 대표는 이렇게 답했습니다.

“비결은 없는 것 같아요. 근데 저희가 그 누구보다 간절하긴 했었던 것 같아요.”

그 간절함은 이런 모습이었습니다. 미디어 업계를 전혀 몰랐던 팀은 미디어·엔터테인먼트 고객들이 암스테르담에서 열리는 국제 방송 컨벤션(IBC)에 많이 온다는 이야기를 듣고 무작정 찾아갔습니다. 부스를 낼 돈은 없었습니다. 바 스툴 세 개를 겨우 구해 가운데 앉아 있다가, 넷플릭스 사람이 지나가면 불러 세웠습니다.

이 대표가 꼽는 또 하나는 집중입니다. 오픈AI가 전선을 넓힐 때 앤트로픽은 글쓰기와 코딩 두 가지에 집중해 좋은 숫자를 만들어 냈습니다. 이 대표는 집중이 참 어렵지만 그만큼 중요하다고 말합니다.

일하는 방식도 남다릅니다. 트웰브랩스는 서울과 샌프란시스코 두 곳에 거점을 둡니다. 고객이 쓰는 모델과 에이전트는 모두 서울에서 개발하고, 샌프란시스코는 주로 제품과 시장 공략을 맡습니다. AI 모델은 출시되는 순간 전 세계가 쓰고 국경이 막아 주지 않는 만큼, 한국에서 만든 모델도 자신감을 갖고 실리콘밸리에서 싸워 이길 수 있다는 게 이 대표의 믿음입니다.

 

 

모델 하나가 아니라
영상을 이해하는 시스템을

이 대표는 이번 시리즈 B를 신호로 받아들입니다. 대규모 영상 처리 기술, 그 위에 얹은 자체 영상 파운데이션 모델, 그리고 그 위에서 만드는 에이전트까지, 이제 더 빨리 더 크게 나아갈 때가 됐다는 신호입니다.

빅테크가 결국 모든 걸 가져가지 않을까요. 박용정 파트너의 생각은 다릅니다. 거대 클라우드 기업들이 시장을 장악한 가운데서도 데이터 분야에서는 스노우플레이크와 데이터브릭스가, 결제에서는 스트라이프가, 코딩에서는 커서가 새 카테고리를 만들었습니다. 그는 영상 이해가 지금 비어 있는 그 자리이고, 트웰브랩스가 그 자리에 가장 가까이 있다고 봅니다.

트웰브랩스도 모델 하나에 기대지 않습니다. 모델은 빠르게 대체되기 때문입니다. 그래서 모델 위에 지능을 쌓고, 그 위에 시스템과 가치를 얹는 풀스택으로 나아가고 있습니다. 트웰브랩스는 이를 ‘영상인지 시스템’이라고 부릅니다. 영상을 인식하고, 인식한 사실로 영상 메모리를 만들고, 그 기억을 언제든 다시 꺼내 추론하는 세 개의 층을 하나로 묶은 시스템입니다. 에이전트 제품 ‘자키(Jockey)’가 그 결과물입니다.

 

트웰브랩스가 말하는 영상인지 시스템. 인식하고, 기억하고, 그 기억 위에서 추론한다.
트웰브랩스가 말하는 영상인지 시스템. 인식하고, 기억하고, 그 기억 위에서 추론한다.

 

앞으로의 계획을 묻자 이 대표는 단순하지만 가장 실행하기 어려운 계획이라며 이렇게 답했습니다. 지금보다 훨씬 더 잘하는 것입니다.

“카메라를 통해 캡처된 영상들이 모두 트웰브랩스를 통해 처리될 수 있는 그날이 올 때까지 열심히 달려 보겠습니다.”

트웰브랩스 이재성 대표와 네이버벤처스 박용정 파트너의 인터뷰 전체는 EO 유튜브에서 볼 수 있습니다.

▶ EO 유튜브에서 인터뷰 영상 보기

 


EO와 초기투자액셀러레이터협회(KAIA)가 주최하는 BOLD SEOUL 2026은 12월 15일 역삼 과학기술컨벤션센터·드리움·GS타워에서 열립니다.

컨퍼런스와 함께 피지컬 AI 해커톤과 데모데이도 열립니다. 새로운 기준을 고민하는 사람들의 이야기와 만남이 기다리는 BOLD SEOUL 2026, 지금 신청하세요.

BOLD SEOUL 2026 : BREAK AWAY 참가 신청

링크 복사
댓글 0
댓글이 없습니다.
추천 아티클