핵심은 인간, AI 발전은 더 똑똑한 인간 트레이너 덕분

인공지능(AI)의 초기 개발 단계에서 AI 모델들이 인간처럼 자연스러운 응답을 생성하기 위해서는 많은 저비용 노동자들이 필요했습니다. 그들은 이미지를 보고 그것이 자동차인지 당근인지 구분하는 등의 기초적인 작업을 수행했습니다. 그러나 시간이 흐르고 AI 모델이 더욱 발전하면서, AI가 이해하고 판단하는 방식 또한 더 정교해졌으며, 이에 따라 AI 훈련에 필요한 인간 트레이너의 역량도 급격히 높아졌습니다.

AI 훈련의 새로운 흐름: 고도화된 전문가의 등장

현재 AI 시장에서 경쟁이 치열해짐에 따라, 단순한 데이터 라벨링에서 벗어나 훨씬 복잡한 전문 지식이 필요하게 되었습니다. 예전에는 학부생들이 AI 모델에게 기본적인 사실을 가르치고 개선하는 데 기여할 수 있었다면, 이제는 의사, 재무 분석가, 회계사와 같은 라이센스를 소유한 전문가들이 AI를 교육하는 데 필수적인 역할을 맡고 있습니다.

코히어(Cohere)의 공동 설립자인 이반 장(Ivan Zhang)은 "1년 전만 해도 학부생을 고용해 AI가 학습하도록 가르칠 수 있었습니다. 하지만 지금은 의사들이 의료 환경에서 AI 모델의 행동을 가르치고, 재무 분석가와 회계사들이 AI에게 복잡한 재무 모델링을 가르칩니다."라고 설명합니다. 코히어는 AI 비즈니스 솔루션을 제공하는 기업으로, OpenAI와 더불어 대표적인 AI 경쟁 기업 중 하나입니다. 이처럼 AI 훈련에 필요한 인간 트레이너의 역할이 전문화되면서, 점점 더 다양한 분야에서 전문가들이 AI 훈련에 참여하게 되었습니다.

Invisible Tech와 같은 스타트업의 부상

코히어를 비롯한 여러 AI 기업들은 전문 트레이너를 고용하기 위해 스타트업과 협력하고 있습니다. 특히 Invisible Tech라는 회사가 AI 훈련의 핵심 파트너로 급부상했습니다. Invisible Tech는 AI 훈련 및 오류 감소 작업에 필요한 인적 자원을 제공하며, AI 모델이 오류를 줄이고 더 정확한 출력을 제공하도록 지원합니다. 이러한 오류는 AI 세계에서 "환각(hallucination)"이라고 불리며, 잘못된 정보나 사실을 AI가 생성할 때 발생하는 문제를 의미합니다.

Invisible Tech의 창립자인 프란시스 페드라자(Francis Pedraza)는 "우리는 전 세계 100개 이상의 나라에서 5,000명 이상의 사람들을 고용하고 있으며, 이들 중 다수가 박사 학위나 석사 학위를 보유한 지식 전문가입니다."라고 말하며, 다양한 분야의 전문가들이 AI 모델 훈련에 기여하고 있음을 강조했습니다.

AI 훈련 시장의 급성장

AI 훈련에 참여하는 인간 트레이너들은 각 분야의 전문 지식에 따라 높은 급여를 받을 수 있습니다. Invisible Tech는 작업의 복잡성에 따라 시간당 최대 40달러를 지급하며, Outlier라는 회사는 시간당 50달러, Labelbox는 양자물리학과 같은 고도의 전문 지식이 필요한 경우 시간당 최대 200달러를 지급합니다. 그러나 단순한 주제의 경우 시간당 15달러로 시작하는 경우도 있습니다.

이처럼 고도로 훈련된 인적 자원이 AI 모델의 성능을 높이는 데 중요한 역할을 하게 되면서, AI 훈련과 관련된 시장은 급속도로 성장하고 있습니다. Invisible Tech는 2015년에 설립된 이후 2021년부터 흑자를 기록하고 있으며, OpenAI, Cohere, AI21, 마이크로소프트와 같은 대형 AI 기업들의 주요 파트너로 자리 잡았습니다.

오픈AI의 훈련 과정: AI의 인간화

오픈AI는 AI 훈련에 있어 매우 중요한 파트너인 Invisible과 협력하며, AI 모델이 잘못된 정보를 생성하지 않도록 하는 다양한 실험을 진행하고 있습니다. OpenAI의 연구진은 "Human Data Team"이라는 이름의 팀을 운영하며, AI 트레이너와 함께 데이터를 수집하고 실험을 진행합니다. 이 과정에서 AI가 사실과 허구를 구분하도록 가르치며, 잘못된 출력을 최소화하는 방법을 모색합니다.

페드라자는 "OpenAI에는 뛰어난 컴퓨터 과학자들이 있지만, 스웨덴 역사나 생물학 문제에 대한 전문가라고 할 수는 없습니다. 그래서 우리는 관련 분야의 전문가들을 고용해 AI에게 해당 지식을 교육하고 있습니다."라고 말합니다. AI는 단순히 과거 데이터를 기반으로 새로운 콘텐츠를 생성하는 것뿐만 아니라, 정확하고 신뢰할 수 있는 정보를 생성해야 하므로, 인간 전문가의 역할은 그 어느 때보다 중요해지고 있습니다.

경쟁사들: AI 훈련 시장에서의 경쟁

AI 훈련 데이터 제공 분야에서 경쟁을 벌이고 있는 또 다른 회사로는 Scale AI가 있습니다. Scale AI는 OpenAI와도 협력하고 있으며, AI 훈련 데이터 세트를 제공하는 것 외에도 AI 트레이너를 지원하는 서비스도 제공합니다. Scale AI는 현재 기업 가치가 140억 달러에 이르는 큰 규모의 스타트업으로, AI 훈련 시장에서 강력한 경쟁력을 가지고 있습니다.

이처럼 AI 훈련 시장은 급성장하고 있으며, AI 기업들은 더욱 정교한 모델을 개발하기 위해 더 많은 전문 트레이너를 필요로 하고 있습니다. AI 훈련에 대한 수요가 높아지면서, 다양한 기업들이 인간 트레이너를 고용해 AI 모델에 데이터를 제공하고, 실험을 통해 성능을 개선하고자 하고 있습니다.

결론: AI 발전의 핵심은 인간

인공지능 기술의 발전 속도가 가파르게 증가하는 가운데, 인간 트레이너의 역할도 더욱 중요해지고 있습니다. 특히 전문적인 지식이 필요한 AI 훈련에서 인간 트레이너는 AI가 정확하고 신뢰할 수 있는 정보를 생성하도록 돕는 필수적인 요소입니다.

Invisible Tech와 같은 스타트업들이 AI 기업과 협력하며 AI 훈련 시장에서 중요한 역할을 하고 있으며, 더 많은 기업들이 AI 훈련의 중요성을 인식하게 되면서, AI 모델의 성능은 더욱 향상될 것입니다. AI가 발전하는 만큼, 이를 훈련하는 인간의 역량도 점점 더 정교해지고 전문화되어야 한다는 점이 명확해지고 있습니다.

이처럼 인간의 지식과 전문성이 결합된 AI 훈련이 앞으로도 AI 기술의 발전을 견인하는 중요한 요소로 작용할 것입니다.

---

https://www.reuters.com/technology/artificial-intelligence/if-your-ai-seems-smarter-its-thanks-smarter-human-trainers-2024-09-28/