"아마존, 직원들에 MS 클라우드 플랫폼 데이터 수집 지시"
- 24-06-16
"AI 모델 훈련 위해 깃허브 계정 생성 후 공유 요청"
시애틀에 본사를 두고 있는 미국 최대 전자상거래업체인 아마존이 직원들에게 마이크로소프트(MS) 클라우드 플랫폼에 가입해 데이터를 수집하도록 지시한 것으로 전해진다.
비즈니스인사이더는 13일 아마존 직원 내부에 공유된 메모를 입수해 "아마존은 최근 직원들에게 MS의 깃허브(GitHub) 소프트웨어 개발 플랫폼에 가입하고 계정을 공유해, 깃허브에서 데이터를 더 빨리 스크랩할 수 있도록 지시했다"고 보도했다.
깃허브는 세계 최대 오픈소스 코드 공유 플랫폼으로, 세계 각지의 개발자들이 소프트웨어를 만들기 위한 소스코드를 공유·저장하는 클라우드 공간이다. 2008년 설립된 후 지난 2018년 MS가 인수했다.
이 매체가 입수한 메모엔 지난달 아마존의 범용인공지능(AGI·사람과 유사한 수준 또는 그 이상의 지능을 갖춘 AI)그룹이 AI 모델 훈련을 위해선 "깃허브의 정량적, 질적 메타데이터가 필요하다"고 적혀 있었다. 메타데이터란 데이터에 대한 구조화된 데이터로, 다른 데이터를 설명해 주는 데이터다.
특히 깃허브에는 1억5000만개 이상의 공개 데이터 저장소가 있는데, 단일 깃허브 계정은 시간당 5000개의 데이터 수집만 요청할 수 있다.
계정 제한으로 인해 깃허브 내 정보를 전부 스크랩하는 데 시간이 너무 오래 걸린다는 점을 아마존은 우려한 것이다.
이 문제를 해결하기 위해 아마존 AGI팀과 경영진은 직원들에게 새로운 깃허브 계정을 생성하고 이를 회사와 공유하도록 요청했다고 한다.
구체적으로 메모에는 "단일 계정으로 이 모든 것을 가져오는 데 수년이 걸릴 것"이라며 "메타데이터 수집 속도를 높이기 위해 팀원들에게 깃허브 계정을 만들고 API(응용프로그램 인터페이스) 키를 공유하도록 요청한다"고 적혀있다.
이를 통해 아마존은 이 모든 계정을 동시에 운영할 수 있어 데이터 수집 시간을 단 몇 주로 단축할 수 있다고도 메모에 적었다.
아마존은 이 같은 깃허브 데이터 수집이 회사의 법률 및 보안 팀 모두에게 승인받은 것이라고 말했다고 한다. 또 아마존은 지침을 준수함으로써 깃허브의 속도 제한을 따르고 계정이 차단되는 것을 방지하고 있다고 했다.
다만 깃허브와 MS 대변인은 이에 대한 비즈니스인사이더의 논평 요청에 응답하지 않았다.
이같은 아마존의 데이터 수집 움직임은 AI 경쟁을 벌이고 있는 테크 회사들 사이에서 '데이터에 대한 극심한 갈증'을 강조한다고 이 매체는 말했다.
아마존은 지난 3월 AI 데이터센터에 향후 15년간 1500억 달러(약 206조9400억원)를 투자하겠다고 발표했으며, 오픈AI의 경쟁사인 미 AI 기업 앤스로픽(Anthropic)에 40억달러를 투자하는 등 최근 'AI 주도권' 확보 경쟁에 뛰어들었다.
특히 아마존은 계열사 아마존웹서비스(AWS)의 클라우드 사업에 AI 서비스를 접목하기 위해 노력하고 있다. 아울러 아마존은 음성 비서 '알렉사'를 AI 버전으로 업그레이드해 대화형 버전을 올해 말 내놓으려 분투하고 있다.
이처럼 AI 시장에서 앞서가려는 아마존은 더 많은 고품질 데이터를 필요로 하는 것이다. 그러나 정보의 공급이 제한돼 있는지라, 테크 기업들 사이에서 '데이터 전쟁'이 벌어지고 있는 것이라고 비즈니스인사이더는 평했다.
구체적으로 이 매체는 "아마존의 경우 아직 출시되지 않은 새 AI 모델을 더욱 지능적이고 인간과 유사하도록 교육하기 위해선 더 많은 고품질 데이터가 필요하다"며 "아마존은 생성형 AI 분야에서 경쟁사인 MS, 구글, 메타를 따라잡기 위해 노력하고 있기 때문"이라고 말했다.
등록된 댓글이 없습니다.
시애틀 뉴스/핫이슈
한인 뉴스
- 시애틀연합장로교회 올해도 장학생 모집한다
- [하이킹 정보] 워싱턴주 시애틀산악회 13일 산행
- [하이킹 정보] 시애틀산우회 13일 정기산행
- [하이킹 정보] 워싱턴주 대한산악회 13일 토요산행
- “소규모 한인 건설업,정부계약 도와드립니다”
- 조기승태권도 30년째 태권도 홍보대사
- 코요태 시애틀공연, 입장권 구입 서둘러야(영상)
- 한국 전국체전 참관인단 모집…한국관광도 함께 실시
- 이번 주말 SNU포럼 강사는 세계적 뇌과학자 이진형 교수(영상)
- 상담소 “그로서리 백 기부 받습니다”
- 재미한국학교협의회 제42회 정기총회 및 학술대회 성황리에(영상)
- S미술학원 권선영 원장, 롯데호텔 시애틀서 초상화전(영상)
- 워싱턴주 한인미술인협회 공모전 당선자와 장학생 발표
- 올해 거북이마라톤 500여명 참석해 대성황 이뤄(+영상,화보)
- 미술인협회 벨라 김 전 회장 ‘의미있는’ 작품 전시한다
- [시애틀 수필-안문자] 초록 향기 속에서 타샤를 그리며
- [신앙칼럼-최인근 목사] 다수가 이기는 세상
- [부고] 포틀랜드 영락교회 백일성 장로 별세
- [하이킹 정보] 시애틀산우회도 내일 거북이마라톤 참가키로
- [하이킹 정보] 워싱턴주 시애틀산악회 6일 거북이마라톤 참가
- 대한부인회 11일 간병인 모집행사 "시간당 21.17~24.28"
시애틀 뉴스
- 머서 아일랜드 “물사용 즉각, 무조건 줄여주세요”
- 시애틀 사무실건물 아파트로 전환하면 특혜준다
- 시애틀서 렌트로 살기에 정말로 안좋다
- 보잉기종 또다시 이륙 도중 바퀴 떨어져 나가
- 시택 독립기념일 쇼에서 드론 55대 호수로 추락
- 시애틀지역 폭염 내일 절정 달한다...일부는 100도까지 치솟아
- 아담 스미스 워싱턴주 연방하원의원도 “바이든 사퇴하라”
- 상반기에는 엔비디아가 미증시 주도했지만 하반기에는 OO
- 엘크와 충돌한 워싱턴주 여성,다른 차에 깔려 숨져
- <속보> 얼더우드몰 16살 총격범 바로 풀려났다
- 워싱턴주도 소형 원자로 12개 추가 설치한다
- 워싱턴주 삼진법 부작용 개선되지 않았다
- 워싱턴주 불체자도 부동산 에이전트 면허 가능해진다
뉴스포커스
- "울 애기 푸바오 잘 있었니"…할부지 졸졸 따르는 푸바오
- "尹 탄핵 청문회 무효"…국힘, 헌재에 권한쟁의심판 청구
- 최저임금 1만원 시대 열렸다…내년 1만30원, 1.7% 인상
- 소녀시대 윤아 28세에 산 청담동 빌딩 '150억' 올랐다
- '총선백서' 한동훈 '읽씹' 포함해 발표…"공개되는 날 與 전쟁터"
- 카카오 김범수 향하는 檢 칼끝…'구속 영장' 카드 꺼내나
- "소수의견 없었다"…10월로 기우는 금리인하 무게추
- 의대생 특혜 문제 없다고?…교육부 가이드라인에 일반 학생 '부글'
- 3차례 돈 풀어도 안 잡히는 쌀값…정부 "더 떨어지면 또 대책"
- "韓 백만장자, 4년 뒤 164만명"…증가율 27% '세계 6위' 전망
- 젤렌스키 손 맞잡은 尹 대통령…나토 정상회의 만찬장서 조우
- "尹탄핵 청문회 위헌"…국힘, 권한쟁의 심판 청구한다
- 쯔양 "전 남친에 40억 뜯겼다…폭행·협박에 술집 일까지 했다"
- "해병대원 특검 필요" 69%…한동훈 대안 찬반 '팽팽'
- 주먹으로 '여성 폭행' 징맨 황철순, 1심 징역 1년…법정구속
- 5월 나라살림 74.4조원 적자…역대 두번째 적자폭