"아마존, 직원들에 MS 클라우드 플랫폼 데이터 수집 지시"
- 24-06-16
"AI 모델 훈련 위해 깃허브 계정 생성 후 공유 요청"
시애틀에 본사를 두고 있는 미국 최대 전자상거래업체인 아마존이 직원들에게 마이크로소프트(MS) 클라우드 플랫폼에 가입해 데이터를 수집하도록 지시한 것으로 전해진다.
비즈니스인사이더는 13일 아마존 직원 내부에 공유된 메모를 입수해 "아마존은 최근 직원들에게 MS의 깃허브(GitHub) 소프트웨어 개발 플랫폼에 가입하고 계정을 공유해, 깃허브에서 데이터를 더 빨리 스크랩할 수 있도록 지시했다"고 보도했다.
깃허브는 세계 최대 오픈소스 코드 공유 플랫폼으로, 세계 각지의 개발자들이 소프트웨어를 만들기 위한 소스코드를 공유·저장하는 클라우드 공간이다. 2008년 설립된 후 지난 2018년 MS가 인수했다.
이 매체가 입수한 메모엔 지난달 아마존의 범용인공지능(AGI·사람과 유사한 수준 또는 그 이상의 지능을 갖춘 AI)그룹이 AI 모델 훈련을 위해선 "깃허브의 정량적, 질적 메타데이터가 필요하다"고 적혀 있었다. 메타데이터란 데이터에 대한 구조화된 데이터로, 다른 데이터를 설명해 주는 데이터다.
특히 깃허브에는 1억5000만개 이상의 공개 데이터 저장소가 있는데, 단일 깃허브 계정은 시간당 5000개의 데이터 수집만 요청할 수 있다.
계정 제한으로 인해 깃허브 내 정보를 전부 스크랩하는 데 시간이 너무 오래 걸린다는 점을 아마존은 우려한 것이다.
이 문제를 해결하기 위해 아마존 AGI팀과 경영진은 직원들에게 새로운 깃허브 계정을 생성하고 이를 회사와 공유하도록 요청했다고 한다.
구체적으로 메모에는 "단일 계정으로 이 모든 것을 가져오는 데 수년이 걸릴 것"이라며 "메타데이터 수집 속도를 높이기 위해 팀원들에게 깃허브 계정을 만들고 API(응용프로그램 인터페이스) 키를 공유하도록 요청한다"고 적혀있다.
이를 통해 아마존은 이 모든 계정을 동시에 운영할 수 있어 데이터 수집 시간을 단 몇 주로 단축할 수 있다고도 메모에 적었다.
아마존은 이 같은 깃허브 데이터 수집이 회사의 법률 및 보안 팀 모두에게 승인받은 것이라고 말했다고 한다. 또 아마존은 지침을 준수함으로써 깃허브의 속도 제한을 따르고 계정이 차단되는 것을 방지하고 있다고 했다.
다만 깃허브와 MS 대변인은 이에 대한 비즈니스인사이더의 논평 요청에 응답하지 않았다.
이같은 아마존의 데이터 수집 움직임은 AI 경쟁을 벌이고 있는 테크 회사들 사이에서 '데이터에 대한 극심한 갈증'을 강조한다고 이 매체는 말했다.
아마존은 지난 3월 AI 데이터센터에 향후 15년간 1500억 달러(약 206조9400억원)를 투자하겠다고 발표했으며, 오픈AI의 경쟁사인 미 AI 기업 앤스로픽(Anthropic)에 40억달러를 투자하는 등 최근 'AI 주도권' 확보 경쟁에 뛰어들었다.
특히 아마존은 계열사 아마존웹서비스(AWS)의 클라우드 사업에 AI 서비스를 접목하기 위해 노력하고 있다. 아울러 아마존은 음성 비서 '알렉사'를 AI 버전으로 업그레이드해 대화형 버전을 올해 말 내놓으려 분투하고 있다.
이처럼 AI 시장에서 앞서가려는 아마존은 더 많은 고품질 데이터를 필요로 하는 것이다. 그러나 정보의 공급이 제한돼 있는지라, 테크 기업들 사이에서 '데이터 전쟁'이 벌어지고 있는 것이라고 비즈니스인사이더는 평했다.
구체적으로 이 매체는 "아마존의 경우 아직 출시되지 않은 새 AI 모델을 더욱 지능적이고 인간과 유사하도록 교육하기 위해선 더 많은 고품질 데이터가 필요하다"며 "아마존은 생성형 AI 분야에서 경쟁사인 MS, 구글, 메타를 따라잡기 위해 노력하고 있기 때문"이라고 말했다.
등록된 댓글이 없습니다.
시애틀 뉴스/핫이슈
한인 뉴스
- US메트로은행 '미 전국 중소은행중 실적 탑 20'에 들어
- 이장우 대전시장, 스타벅스 관계자 만나 '로스터리 대전건립 추진'
- 재미 한인 탁구인들의 축제 성황리에 열렸다
- KWA대한부인회 타코마아파트 다음달 신청받는다
- 시애틀-대전 자매도시 35주년 기념행사 화려했다(영상,화보)
- "한국일보 청암장학생 신청하세요"
- 시애틀 한인중고생 위한 SAT캠프 열린다
- 시애틀타임스 “양희영, 은퇴하면 안될 실력자다”
- [영상] 샛별예술단 베냐로야홀서 공연 펼쳐
- 지소연 선수, 시애틀한인회 명예회원됐다(+영상,화보)
- 페더럴웨이 한국정원 ‘한우리 정원’ 10월 개장한다(영상)
- 미주한인의 날 워싱턴주 신임 이사장에 김성훈, 대회장 김필재(영상)
- [시애틀 수필-김윤선] 찬란한 빛의 밤
- [신앙칼럼-최인근 목사] 인생은 결단입니다!
- [서북미 좋은 시-김순영] 쉼미 좋은 시-김순영] 쉼
- 서은지 총영사 알래스카서 통일강연회
- 한국 우상임씨, 시애틀서 아코디언 1인극 펼친다
- 이장우 대전시장,경제사절단 이끌고 시애틀온다
- 오레곤한인회 주최 '2024 서북미 오픈골프대회'열린다
- [하이킹 정보] 시애틀산우회 22일 합동캠핑
- [하이킹 정보] 워싱턴주 시애틀산악회 22일 산행
시애틀 뉴스
- 미 대법원, 아이다호 응급 낙태 허용…바이든 정부 '작은 승리'
- 아마존도 사상 최고가 시총 2조달러 돌파했다
- 아마존 7월16∼17일 이틀간 대규모 할인 프라임데이
- 시애틀서 문닫을 초등학교 명단공개 다시 연기됐다
- EU, MS '반독점법 위반' 잠정 결론…"화상회의앱 끼워팔아"
- 시애틀지역 재산세 감면 혜택자 크게 늘어난다
- 시애틀타임스 “양희영, 은퇴하면 안될 실력자다”
- 양희영 워싱턴주 사할리서 메이저 KPMG 위민스 우승(+영상)
- 워싱턴주 105세 할머니,83년만에 스탠포드 졸업했다(영상)
- 마라톤중 넘어진 시애틀여성, 1,310만달러 받는다
- 시애틀시내 중학교 두곳 학교서 핸드폰 사용금지
- 시애틀 다운타운 힐튼호텔 일본기업에 ‘헐값’에 팔렸다
- 벨뷰 갑부 트럼프 선거자금으로 100만달러 기부
뉴스포커스
- 부산, 이러다 사라질라…광역시 중 첫 '소멸 위험 지역'
- "손흥민 봐서 5억 달라, 20억 안 부른 게 다행" 학부모 '녹취' 파장
- "尹, '이태원 조작 사건' 발언 직접 해명해야"…민주, 총공세 돌입
- "압구정현대 경비원 100여명 대량해고 정당"…대법서 확정
- 서울 집값, 3주 연속 오름세…경기·인천 수도권도 동반 상승
- 박수홍·박세리 울린 '친족상도례'…법 개정 시기는 미지수
- "저출산 대책, 소득공제 확대보단 보육비 등 재정지원이 효율적"
- 중처법 시행 후 최악 '화성 참사'…수사능력 시험대 오른 고용부
- 실리 없는 '집단휴진'…환자들 “언제까지 불안에 떨어야 하나”
- 3세대 실손보험 막차 탄 고령층 소비자 ‘분통’…3년새 보험료 50% 뛰었다
- '세계 24→11위' 한국 국가총부채 5년새 더 악화…GDP 2.7배
- 네이버 이해진·최수연, 美서 젠슨 황 만나 '소버린 AI' 방안 논의
- "편의점이 24시간 야간 영업 못하는 이유?…최저임금 부담돼서"
- 황의조 측에 수사정보 유출한 현직 경찰관 구속 송치
- "오늘 잠 안 올 것 같아" 수만 팬 앞 눈물 쏟은 뉴진스, 감동의 도쿄돔 입성
- 손흥민, 청담동 '400억' 초고가 주택 '에테르노 압구정' 샀다