페이스북, 하둡 스케줄링 프레임워크 ‘코로나’ 오픈소스로 공개
OSS
게시글 작성 시각 2012-11-22 15:01:30
2012년 11월 09일 (금)
ⓒ Tech It!, By DELIGHT/기쁘미
페이스북이 코드명 ‘코로나’로 불리는 빅데이터 기술을 오픈소스로 풀었다. 코로나는 하둡 잡(jobs)들을 스케줄링하고 멀티 테먼트 환경에 적합한 빅데이터 기술로 하둡을 효과적이고 확장성 있게 운영할 수 있도록 지원한다.
벤처비트에 따르면 페이스북은 한동안 하둡/맵리듀스 적용된 빅데이터 환경을 운영해왔다. 몇년간은 잘 굴러갔다. 그러나 2011년초부터 시스템에 한계에 봉착했다. 이것은 페이스북 내부에서 보다 나은 스케줄링 프레임워크가 필요하다는 결론으로 이어졌다.
페이스북팀은 일단 YARN이라는 기술을 적용해봤다. 그러나 하둡 파일 시스템 페이스북 버전과 호환에 많은 문제가 있었다. 페이스북은 YARN은 페이스북 규모의 워크로드를 다룰 수 없다고 결론 내렸다.
이후 페이스북 인프라팀은 맵리듀스 스케줄러 기반으로 프레임워크를 만들기 시작했고, 그렇게 해서 나온 결과물이 코로나다.
※ 본 내용은 Tech It!(http://techit.co.kr)의 저작권 라이선스 정책(CC-BY)에 따라 공유되고 있습니다.
[원문출처 : http://techit.kr/13133]
| 번호 | 제목 | 조회수 | 작성 |
|---|---|---|---|
| 공지 | [Open UP 활용가이드] 공개SW 활용 및 개발, 창업, 교육 "Open UP을 활용하세요" | 344412 | 2020-10-27 |
| 공지 | [Open UP 소개] 공개SW 개발·공유·활용 원스톱 지원 Open UP이 함께합니다 | 334213 | 2020-10-27 |
| 551 | 5대 클라우드 스토리지 서비스의 문제점 대해부 | 5621 | 2012-11-22 |
| 550 | 쓰리JS, 왕초보용 표준 웹3D라이브러리 | 5536 | 2012-11-22 |
| 549 | 클라우드 기반 오픈오피스 개발중 | 5529 | 2012-11-22 |
| 548 | 초소형 PC 라즈베리 파이, RISC OS 공식 지원 | 5792 | 2012-11-22 |
| 547 | 페이스북, 하둡 스케줄링 프레임워크 ‘코로나’ 오픈소스로 공개 | 6077 | 2012-11-22 |
| 546 | IT업계 뜨거운 화두 'SW 정의', 어떤 모습? | 5729 | 2012-11-22 |
| 545 | 국내 오픈소스 기반 SW 글로벌 개발자들 `러브콜` | 6053 | 2012-11-21 |
| 544 | 지경부, ‘소프트웨어 주간’ 맞아 다양한 행사 마련 | 5176 | 2012-11-20 |
| 543 | 어도비, 플래시 잊고 HTML5로 '새출발' | 5766 | 2012-11-20 |
| 542 | 빅데이터 시대 'DW 시장은 속도 경쟁중' | 5520 | 2012-11-20 |
0개 댓글