인터넷 / 소프트웨어 : 윈도우즈, 리눅스, 기타 운영체제, 각종 어플리케이션, 프로그램, 소프트웨어, 인터넷, 인터넷 서비스에 대한 이야기, 소식, 테스트, 정보를 올리는 게시판입니다.

소식

2020.07.18 11:37

깃허브 아카이브 프로그램, 북극에 21TB 데이터를 저장

이견 https://gigglehd.com/gg/7801323

페미니스트입니다만 문제라도?

조회 수 2243 댓글 25

Extra Form
참고/링크	https://github.blog/2020-07-16-github-ar...he-arctic/

GitHub는 2019년 11월 깃허브 북극 코드 저장소(GitHub Arctic Code Vault)와 깃허브 아카이브 프로그램을 발표했습니다. 주요 기관과 협력하며 미래 세대를 위해 최소 천 년간 코드를 보존하는 계획입니다.

GitHub Archive Program

16일 깃허브는 2020년 2월 2일 모든 공개된 활성 저장소 스냅샷을 저장했고, 아카이브 파트너 Piql을 통해 이를 필름에 기록했으며 7월 8일 스발바르에 있는 북극 코드 볼트에 자료를 성공적으로 보관했다고 발표했습니다. 자료는 21TB 분량으로 디지털 감광 아카이브 필름인 piqlFilm 186개에 보존되었습니다.

(원 게시물에서 더 많은 사진을 확인할 수 있습니다.)

그리고 깃허브에서는 프로필 페이지에 북극 코드 볼트 뱃지를 추가했습니다. 마우스를 가져다 대면 기여한 주요 저장소가 표시됩니다.

한편 깃허브는 인터넷 아카이브, 소프트웨어 헤리티지 재단, 프로젝트 실리카와도 함께 방대한 분량의 자료를 보존했으며 앞으로도 지속적으로 이루어질 예정이라고 발표했습니다.

삭제 요청

TAG •

깃허브,

목록 스크랩

위로 아래로 댓글로 가기

Comments '25'

낄낄 2020.07.18 12:43

2020년 2월 2일 모든 공개된 저장소의 스냅샷을 저장한게 21TB군요. 깃허브에 올라온 코드의 양이 어마어마할텐데, 이미지나 영상이 아닌 코드라서 그런가 실제 차지하는 용량은 그렇게 크지 않군요.
쮸쀼쮸쀼 2020.07.18 20:07

정말로 [모든]은 아니고, 다음 기준에 맞는 경우에만 이번 북극 코드 저장소에 포함되었습니다.

* 2019년 11월 13일부터 2020년 2월 2일 사이 한번이라도 Commit을 한 저장소
* 2019년 2월 3일부터 2020년 2월 2일 사이에 하나라도 Star를 받은 저장소
* 250개 이상의 Star를 받은 저장소

그리고 Github에 이미지 같은 바이너리 파일을 올리는 경우도 흔한데, 이런 경우는 100KB 이상의 파일일 경우 Star를 받은 수에 비례하여 파일을 보존하였다고 합니다.
검사 BLACK COW IN YOUR AREA 2020.07.18 13:27

북극은 아둔의 창이 되어가네요.
슬렌네터 Human is just the biological boot loader for A.I. 2020.07.18 22:14

가슴이 웅장해지네요
?
Legendof61 2020.07.18 22:17

21TB인데 저렇게 번잡하게 하나요?

그냥 HGST HDD나 ioDrive 빡빡한거 혹은 100TB(님버스 데이타에서 나온거죠...) SSD 몇개 레이드 걸면 끝날거 같은데...
https://www.techradar.com/news/at-100tb-the-worlds-biggest-ssd-gets-an-eye-watering-price-tag
Precompile 2020.07.18 22:32

깃헙 측에서 PB랑 헷갈린 게 아닐까요? 솔직히 이미지 파일도 포함하는데 21TB는 심하게 작습니다.
?
Legendof61 2020.07.18 22:35

개인적으로 PB까지는 모르겠고...

이미지 들어가면 최소로 잡아도 100TB는 넘어갈거 같고 NAS 굴려본 작은 경험에서 추론하면 저정도 필름으로 어찌 저장하는지는 모르겠지만 10카피 떠놔도 LTO-8 같은 솔루션 쓰면 PB급 같은데요... LTO-8 그 작은 카트리지에 비압축으로 1.5TB 담는걸로 아는데 10장씩 카피 떠놔도 테이프 부피가 박스 하나정도 나오지 않을까요...
?
nsys 2020.07.19 00:18

밀도 높은데 재기록 가능하면 내구성이 떨어지죠
깃헙 아카이브 목표는 100년 수준도 아니고 영구 보관입니다.
본문 링크 타고 들어가 보시면 마이크로 필름 형태로 저장 된게 보입니다
그리고 문명이 붕괴됐을때를 대비한거라 현대의 초고집약적 센서 기술 필요하지 않게 저밀도로 기록 했고요.
?
Legendof61 2020.07.19 00:20

그래서 자기테이프 생각하고 봤는데... 밑에 댓글 보니 천년 보관에는 부적합한가 보군요. 필름으로 디지털 정보 저장이라...

이제 저 부피가 이해가 갑니다.
쮸쀼쮸쀼 2020.07.19 10:16

다른 분들이 이미 설명하셨지만, 조금 더 부연설명하자면 다음과 같습니다.
저기 들어간 것은 총 201개의 마이크로필름 릴입니다. 각 릴은 65,000개의 프레임을 담고 있고요. 200개의 릴에는 압축된 바이너리 데이터가 QR코드 형태로 기록되어 있고, 나머지 1개의 릴에는 여기 들어간 데이터를 어떻게 읽을 수 있는지와 이게 어떤 데이터인지를 설명하는 내용이 영어, 중국어, 힌두어, 스페인어, 아랍어로 들어가 있습니다. 이런 마이크로필름은 축소비율을 높이면 그만큼 판독하기가 어렵고, 이번 저장의 목적 자체가 [만일의 사태를 대비해 최소한의 기술 역량으로 판독할 수 있는 데이터 저장소 구축]이기 때문에 너무 축소를 하는(=저장 밀도를 높이는) 것도 좋지 않습니다. 저장 밀도를 대략적으로 계산해보면 한 프레임에 대략 1.5~1.7 MB 정도 담은 것 같네요. QR코드 하나는 바이너리 데이터를 최대 2,953바이트 담을 수 있다니까, 이 추측대로라면 필름 프레임 하나에 담은 QR코드는 대략 550~600개 정도인 것 같습니다.
?
Legendof61 2020.07.19 12:04

일반적으로 보지 못한 저장 기술이군요. 쉬워보이기도 하고 고비용 저장장치 같기도 하네요.

설명 감사합니다. 잘 읽고 갑니다.
쮸쀼쮸쀼 2020.07.19 13:56

사실 QR코드를 이용한 디지털 데이터 저장이라는 점을 제외하면, 저기에 사용된 마이크로필름 기술 자체는 오래 전부터 쓰던 것입니다. 예를 들면 과거에는 오래된 신문나 잘 찾아보지 않는 서적 등의 내용을 보존할 때 마이크로필름에 축소 촬영을 하는 방법을 많이 사용했습니다. 지금도 크고 오래된 도서관에서 옛날 신문기사를 확인할 때는 마이크로필름 아카이브에서 필름 릴을 판독기에 걸어서 뒤지곤 합니다. 종이로 된 원본 자료에 비하면 부피를 최소 수백분의 1로 압축할 수 있고, 사진술에서 파생되어 이미 19세기부터 시작되었던 기술이라 보존성이 어느 정도 검증되었으며, 내용을 확인하기 위해서는 기본적인 광학 기술만 있으면 됩니다. 그리고 저게 보존성이나 비용 등을 생각하면 종이에 직접 인쇄하는 것보다는 저렴하고 좋습니다.
?
NPU 2020.07.21 11:53

부연설명 감사합니다
?
고대문명꾸꾸꾸 2020.07.18 23:49

프로젝트 홈페이지에 들어가보시면
SSD, HDD, 자기테이프 등이 천년가는 내구도를 보장하지 못하니
빛으로 디지털 코드를 인쇄한 필름을 사용했다고 나오네요.
?
joyfuI 2020.07.19 00:20

생각보다 용량이 작네요? 전세계 코드가 고작 21TB...?
?
analogic 2020.07.19 01:44

북극 얼음 녹아 없어질 전망이라는데 북극은 좀 안맞는 장소 같군요.
?
고자되기 2020.07.19 01:48

역시 교통비가 좀 들더라도 태양이 오래갈거 같습니다
?
analogic 2020.07.19 13:48

북극 해빙 문제는 현실적으로 진행중 입니다.
북극해 녹으면서 그쪽 항로 개척되고 북극 주변 국가들은 북극해 쪽으로 영해 넓히려는 움직임이 있습니다.
북극지방의 빙하가 녹아 없어지는게 몇십년 정도만으로도 확연히 달라질 정도로 급격히 진행중 입니다.
저런 자료 보관하는 곳은 이제 북극쪽이 아니라 남극점 근처를 생각해봐야 될 시점이 다가오고 있다고 봅니다.
Loliconite 3939퓨어퓨어 2020.07.19 02:00

https://www.arcticworldarchive.org/

깃헙 말고도 파트너가 제법 많네요.
?
루나프레야 2020.07.19 16:47

제가 짠 코드도 저기에 있겠군요..
cowper 2020.07.20 10:36

근데 역사적으로 검증된 자료 저장 방법은 돌에 새기는거라던데.............................
AdorableZ 5等級の花婿 2020.07.20 10:46

맞습니다. 아이러니하게도 가장 오래가는 저장방법은 아날로그중에서도 가장 무식한 방법이죠...
Precompile 2020.07.20 22:53

TB단위로 새길 기술은 전혀 무식하지 않다는 게 유머죠... 사실 팔만대장경 몇 채 급으로 쌓아올리면 아날로그만으로 달성할 수 있긴 합니다.
카토메구미 카토릭교 신자 입니다.! 카토는 언제나 진리 입니다. 2020.07.20 14:28

아앗 저도...
Semantics ε=ε=ε=(~￣▽￣)~ 2020.07.20 22:26

아앗 저도...(2)

작성된지 4주일이 지난 글에는 새 코멘트를 달 수 없습니다.

No Image

MS, 깃허브 인수...오픈소스 진영 "우려"

마이크로소프트가 소스코드 저장소 서비스 깃허브를 인수한다. 마이크로소프트는 이로써 리눅스와 오픈소스 소프트웨어 진영의 8천만개 코드저장소와 관련 개발자 2천700만명을 단번에 끌어들이게 됐다. 사업에 어려움을 겪어온 깃허브...

Date2018.06.04 소식 By카토메구미 Reply16 Views1138

Read More
No Image

MS, 깃허브를 인수?

마이크로소프트가 깃허브(GitHub)를 인수하기 위한 협상을 몇 년 동안 계속해서 시도해 왔으며, 이번에는 상당 수준까지 진도가 나간 듯 합니다. 2015년에는 20억 달러로 평가됐으나 지금은 그보다 더 늘어 50억 달러 이상에 인수될 가능...

Date2018.06.02 소식 By낄낄 Reply5 Views764

Read More
화웨이의 EROFS 파일 시스템

화웨이가 리눅스를 위한 새로운 파일 시스템인 EROFS를 발표했습니다. 기존의 ext4와 비교하면 성능이 대폭 상승, 5~6배까지 나오네요. EROFS는 Extendable Read-Only File System의 줄임말로 파일을 압축해 공간을 절약하고 성능과 속도...

Date2018.06.02 소식 By낄낄 Reply5 Views1273

Read More
어도비 프리미어에서 인텔 퀵싱크의 성능

동영상 편집에서 많이들 사용하는 어도비 프리미이가 인텔 퀵싱크를 지원합니다. 퀵싱크 자체는 인텔이 2011년에 내놓은 샌디브릿지부터 추가된 것으로 영상 처리 속도를 높여줍니다. 처리 시간. 짧을수록 좋습니다. 퀵싱크를 쓰지 않았을...

Date2018.06.02 소식 By낄낄 Reply5 Views3278

Read More
스피커 소리로 디스크 오류나 고장을 유도하는 기법.

컴퓨터 스피커로 하드디스크와 공진을 일으키는 (가청)주파수 대역의 신호를 출력함으로서 하드디스크에 물리적 부담을 주고, 이를 통해 IO오류나 디스크 고장을 유도하는 공격 기법이 발견되었습니다. 또한, 가청 주파수 대역이 아닌 초...

Date2018.06.02 소식 ByPHYloteer Reply23 Views3500

Read More
윈도우 10 1803의 사용자가 절반

윈도우 10 버전 중에서 가장 많은 점유율을 보이는 건 1803입니다. 50%. 그 다음은 1709가 43%네요. 여전히 초기 버전들도 쓰이고 있지만 마이크로소프트의 적극적인 업데이트 정책 때문에 최신으로 판올림은 꾸역꾸역 되가는 듯.

Date2018.06.02 소식 By낄낄 Reply8 Views1212

Read More
이제 구글 서비스에서 페이팔 사용 가능

안드로이드 페이 유저들은 1년전쯤부터 페이팔 계정에 로그인(만) 할 수 있었는데요. 구글과 페이팔이 파트너쉽을 유지하기로 함에 따라 이젠 페이팔을 이용해서 Google Play, Youtube, Gmail과 같은 제품에서 송금 서비스를 사용할 ...

Date2018.05.30 소식 ByMoria Reply0 Views473

Read More
애플, 정부의 앱 게시 중단 요청 공개

테크타이탄은 투명성 보고서를 정의하고 확대해왔습니다. 구글은 2년마다 그들의 보고서를 읽기 쉽게 작성해왔으며, 페이스북은 저작권, 상표, 위조와 관련된 내용을 추가했습니다. 25일 애플은 그들의 보고서를 공개했으며, 앞으로도...

Date2018.05.30 소식 ByMoria Reply1 Views594

Read More
No Image

EOS 코인에 심각한 취약점이 존재

중국의 보안업체인 360 시큐리티가 EOS 코인 네트워크 시스템에 심각한 취약점이 있다고 보고했습니다. 이를 악용하면 EOS 노드에서 임의 코드를 실행할 수 있다네요. 다만 EOS 측에선 이 이슈를 모두 수정했다고 밝혔습니다. https://git...

Date2018.05.29 소식 By낄낄 Reply1 Views582

Read More
No Image

윈도우 10 RS5 빌드 17677의 변경점

윈도우 10 RS5, 빌드 17677에서 달라진 점입니다. LTE 통신을 위한 새로운 드라이버가 20년만에 바뀌었는데, 17655만 해도 새 드라이버가 기본은 아니었습니다. 하지만 이제 기본으로 변경. 엣지 브라우저의 디자인이 일부 변경됩니다. 브...

Date2018.05.25 소식 By낄낄 Reply2 Views1129

Read More
윈도우 10 4월 업데이트의 인텔 SSD 이슈를 해결

마이크로소프트가 윈도우 10의 2018년 4월 업데이트(RS4 1803)를 위한 KB4100403 핫픽스를 발표했습니다. 특정 인텔 SSD와 도시바 SSD에서 시스템 충돌이 생기거나 배터리 사용량이 늘어나는 문제를 해결했습니다. 또 외장 그래픽 시스템...

Date2018.05.25 소식 By낄낄 Reply2 Views774

Read More
Pornhub, 무료&무제한 대역폭 VPN 서비스 VPNhub 런칭

인터넷에서 성인 포르노 사이트중 가장 트래픽이 많은 Pornhub에서 무료, 무제한 대역폭의 VPN서비스인 VPNhub 를 런칭했습니다. VPNhub 라고 불리는 이 앱은 Windows, MacOS, iOS, Android에서 사용할 수 있습니다. VPNhub는 월 13 ...

Date2018.05.25 소식 By플레타 Reply5 Views4913

Read More
CSS만으로 그려낸 스마트폰 이미지

자바스크립트는 한 줄도 쓰지 않고 오직 CSS 스타일시트만 사용해서 스마트폰을 그려낸 이미지입니다. 별로 효율적이진 않지만 대단하긴 하네요.

Date2018.05.24 소식 By낄낄 Reply1 Views919

Read More
국내 최대 웹툰 불법유통 사이트 '밤토끼' 운영자 검거

경찰 "빠른 시일 내 사이트 완전 폐쇄…유사 사이트 단속" 국내 최대 웹툰 불법유통 해외 사이트 '밤토끼' 운영자가 검거됐다. 23일 부산경찰청(청장 조현배) 사이버 안전과에 따르면 부산경찰청은 최근 밤토끼 운영자 A씨(43세, 프로...

Date2018.05.23 소식 By호무라 Reply7 Views1100

Read More
No Image

써드파티 개발자들의 연합: 애플에 대한 요구사항

써드파티 앱 개발자들이 연합해 애플에 공개 서신을 보냈습니다. 애플은 앱 스토어의 모든 앱에서 무료 시험 사용(Free Trials)을 할 수 있도록 만들 수 있으나, 실제 앱 스토어에선 오직 구독제 앱만 시험 사용이 가능하다고 지적했습니...

Date2018.05.21 소식 By낄낄 Reply0 Views913

Read More
구글: Don't be evil에서 Do the right thing으로

구글이 회사 강령을 사악해지지 말아라(Don't be evil)에서 올바른 일을 하라(Do the right thing)로 바꿨습니다. 4월 말까지만 해도 원래 강령을 유지했으나 5월 4일부터 바뀌었다고 하네요.

Date2018.05.20 소식 By낄낄 Reply13 Views2284

Read More
No Image

비트코인, 1년에 전세계 전력의 0.5%

전 세계에서 비트코인의 채굴에 사용되는 전력을 모두 더하면 아무리 잡게 잡아도 2.55GW로, 아일랜드 전체에 맞먹는 숫자라고 합니다. 그리고 올해 말에는 7.7GW까지 늘어나 오스트리아 전체 수준으로 늘어나며, 이때는 전세계 발전량의 ...

Date2018.05.18 소식 By낄낄 Reply15 Views1264

Read More
윈도우 10, 안티 바이러스 보호 프로세스 실행이 필수

윈도우 10 인사이더 프리뷰 RS5의 빌드 17672가 공개됐습니다. 윈도우 보안 센터의 설정이 바뀌어, 써드파티 안티 바이러스를 실행할 때는 보안 센터에 등록해 보호된 프로세스로 설정해야만 합니다. 그렇게 하지 않으면 윈도우 보안 UI...

Date2018.05.17 소식 By낄낄 Reply0 Views1485

Read More
No Image

미국 망중립성 폐지 무산되었습니다.

상원에서 망중립성 원칙 복구를 통과시켰다는군요. 흠터레스팅…

Date2018.05.17 소식 By아스트랄로피테쿠스 Reply3 Views1496

Read More
카스퍼스키, 핵심 인프라를 스위스로 이전

카스퍼스키가 자사 신뢰성을 높이기 위해 2019년 말까지 스위스 취리히에 데이터센터를 설립하고, 유럽/북미/싱가포르/호우/일본/한국 사용자들의 정보 저장/처리를 수행합니다. 이들 데이터는 사이버 위협 데이터를 자동으로 처리하는 클...

Date2018.05.16 소식 By낄낄 Reply6 Views777

Read More