인터넷 / 소프트웨어 : 윈도우즈, 리눅스, 기타 운영체제, 각종 어플리케이션, 프로그램, 소프트웨어, 인터넷, 인터넷 서비스에 대한 이야기, 소식, 테스트, 정보를 올리는 게시판입니다.

소식

2020.07.18 11:37

깃허브 아카이브 프로그램, 북극에 21TB 데이터를 저장

이견 https://gigglehd.com/gg/7801323

페미니스트입니다만 문제라도?

조회 수 2243 댓글 25

Extra Form
참고/링크	https://github.blog/2020-07-16-github-ar...he-arctic/

GitHub는 2019년 11월 깃허브 북극 코드 저장소(GitHub Arctic Code Vault)와 깃허브 아카이브 프로그램을 발표했습니다. 주요 기관과 협력하며 미래 세대를 위해 최소 천 년간 코드를 보존하는 계획입니다.

GitHub Archive Program

16일 깃허브는 2020년 2월 2일 모든 공개된 활성 저장소 스냅샷을 저장했고, 아카이브 파트너 Piql을 통해 이를 필름에 기록했으며 7월 8일 스발바르에 있는 북극 코드 볼트에 자료를 성공적으로 보관했다고 발표했습니다. 자료는 21TB 분량으로 디지털 감광 아카이브 필름인 piqlFilm 186개에 보존되었습니다.

(원 게시물에서 더 많은 사진을 확인할 수 있습니다.)

그리고 깃허브에서는 프로필 페이지에 북극 코드 볼트 뱃지를 추가했습니다. 마우스를 가져다 대면 기여한 주요 저장소가 표시됩니다.

한편 깃허브는 인터넷 아카이브, 소프트웨어 헤리티지 재단, 프로젝트 실리카와도 함께 방대한 분량의 자료를 보존했으며 앞으로도 지속적으로 이루어질 예정이라고 발표했습니다.

삭제 요청

TAG •

깃허브,

목록 스크랩

위로 아래로 댓글로 가기

Comments '25'

낄낄 2020.07.18 12:43

2020년 2월 2일 모든 공개된 저장소의 스냅샷을 저장한게 21TB군요. 깃허브에 올라온 코드의 양이 어마어마할텐데, 이미지나 영상이 아닌 코드라서 그런가 실제 차지하는 용량은 그렇게 크지 않군요.
쮸쀼쮸쀼 2020.07.18 20:07

정말로 [모든]은 아니고, 다음 기준에 맞는 경우에만 이번 북극 코드 저장소에 포함되었습니다.

* 2019년 11월 13일부터 2020년 2월 2일 사이 한번이라도 Commit을 한 저장소
* 2019년 2월 3일부터 2020년 2월 2일 사이에 하나라도 Star를 받은 저장소
* 250개 이상의 Star를 받은 저장소

그리고 Github에 이미지 같은 바이너리 파일을 올리는 경우도 흔한데, 이런 경우는 100KB 이상의 파일일 경우 Star를 받은 수에 비례하여 파일을 보존하였다고 합니다.
검사 BLACK COW IN YOUR AREA 2020.07.18 13:27

북극은 아둔의 창이 되어가네요.
슬렌네터 Human is just the biological boot loader for A.I. 2020.07.18 22:14

가슴이 웅장해지네요
?
Legendof61 2020.07.18 22:17

21TB인데 저렇게 번잡하게 하나요?

그냥 HGST HDD나 ioDrive 빡빡한거 혹은 100TB(님버스 데이타에서 나온거죠...) SSD 몇개 레이드 걸면 끝날거 같은데...
https://www.techradar.com/news/at-100tb-the-worlds-biggest-ssd-gets-an-eye-watering-price-tag
Precompile 2020.07.18 22:32

깃헙 측에서 PB랑 헷갈린 게 아닐까요? 솔직히 이미지 파일도 포함하는데 21TB는 심하게 작습니다.
?
Legendof61 2020.07.18 22:35

개인적으로 PB까지는 모르겠고...

이미지 들어가면 최소로 잡아도 100TB는 넘어갈거 같고 NAS 굴려본 작은 경험에서 추론하면 저정도 필름으로 어찌 저장하는지는 모르겠지만 10카피 떠놔도 LTO-8 같은 솔루션 쓰면 PB급 같은데요... LTO-8 그 작은 카트리지에 비압축으로 1.5TB 담는걸로 아는데 10장씩 카피 떠놔도 테이프 부피가 박스 하나정도 나오지 않을까요...
?
nsys 2020.07.19 00:18

밀도 높은데 재기록 가능하면 내구성이 떨어지죠
깃헙 아카이브 목표는 100년 수준도 아니고 영구 보관입니다.
본문 링크 타고 들어가 보시면 마이크로 필름 형태로 저장 된게 보입니다
그리고 문명이 붕괴됐을때를 대비한거라 현대의 초고집약적 센서 기술 필요하지 않게 저밀도로 기록 했고요.
?
Legendof61 2020.07.19 00:20

그래서 자기테이프 생각하고 봤는데... 밑에 댓글 보니 천년 보관에는 부적합한가 보군요. 필름으로 디지털 정보 저장이라...

이제 저 부피가 이해가 갑니다.
쮸쀼쮸쀼 2020.07.19 10:16

다른 분들이 이미 설명하셨지만, 조금 더 부연설명하자면 다음과 같습니다.
저기 들어간 것은 총 201개의 마이크로필름 릴입니다. 각 릴은 65,000개의 프레임을 담고 있고요. 200개의 릴에는 압축된 바이너리 데이터가 QR코드 형태로 기록되어 있고, 나머지 1개의 릴에는 여기 들어간 데이터를 어떻게 읽을 수 있는지와 이게 어떤 데이터인지를 설명하는 내용이 영어, 중국어, 힌두어, 스페인어, 아랍어로 들어가 있습니다. 이런 마이크로필름은 축소비율을 높이면 그만큼 판독하기가 어렵고, 이번 저장의 목적 자체가 [만일의 사태를 대비해 최소한의 기술 역량으로 판독할 수 있는 데이터 저장소 구축]이기 때문에 너무 축소를 하는(=저장 밀도를 높이는) 것도 좋지 않습니다. 저장 밀도를 대략적으로 계산해보면 한 프레임에 대략 1.5~1.7 MB 정도 담은 것 같네요. QR코드 하나는 바이너리 데이터를 최대 2,953바이트 담을 수 있다니까, 이 추측대로라면 필름 프레임 하나에 담은 QR코드는 대략 550~600개 정도인 것 같습니다.
?
Legendof61 2020.07.19 12:04

일반적으로 보지 못한 저장 기술이군요. 쉬워보이기도 하고 고비용 저장장치 같기도 하네요.

설명 감사합니다. 잘 읽고 갑니다.
쮸쀼쮸쀼 2020.07.19 13:56

사실 QR코드를 이용한 디지털 데이터 저장이라는 점을 제외하면, 저기에 사용된 마이크로필름 기술 자체는 오래 전부터 쓰던 것입니다. 예를 들면 과거에는 오래된 신문나 잘 찾아보지 않는 서적 등의 내용을 보존할 때 마이크로필름에 축소 촬영을 하는 방법을 많이 사용했습니다. 지금도 크고 오래된 도서관에서 옛날 신문기사를 확인할 때는 마이크로필름 아카이브에서 필름 릴을 판독기에 걸어서 뒤지곤 합니다. 종이로 된 원본 자료에 비하면 부피를 최소 수백분의 1로 압축할 수 있고, 사진술에서 파생되어 이미 19세기부터 시작되었던 기술이라 보존성이 어느 정도 검증되었으며, 내용을 확인하기 위해서는 기본적인 광학 기술만 있으면 됩니다. 그리고 저게 보존성이나 비용 등을 생각하면 종이에 직접 인쇄하는 것보다는 저렴하고 좋습니다.
?
NPU 2020.07.21 11:53

부연설명 감사합니다
?
고대문명꾸꾸꾸 2020.07.18 23:49

프로젝트 홈페이지에 들어가보시면
SSD, HDD, 자기테이프 등이 천년가는 내구도를 보장하지 못하니
빛으로 디지털 코드를 인쇄한 필름을 사용했다고 나오네요.
?
joyfuI 2020.07.19 00:20

생각보다 용량이 작네요? 전세계 코드가 고작 21TB...?
?
analogic 2020.07.19 01:44

북극 얼음 녹아 없어질 전망이라는데 북극은 좀 안맞는 장소 같군요.
?
고자되기 2020.07.19 01:48

역시 교통비가 좀 들더라도 태양이 오래갈거 같습니다
?
analogic 2020.07.19 13:48

북극 해빙 문제는 현실적으로 진행중 입니다.
북극해 녹으면서 그쪽 항로 개척되고 북극 주변 국가들은 북극해 쪽으로 영해 넓히려는 움직임이 있습니다.
북극지방의 빙하가 녹아 없어지는게 몇십년 정도만으로도 확연히 달라질 정도로 급격히 진행중 입니다.
저런 자료 보관하는 곳은 이제 북극쪽이 아니라 남극점 근처를 생각해봐야 될 시점이 다가오고 있다고 봅니다.
Loliconite 3939퓨어퓨어 2020.07.19 02:00

https://www.arcticworldarchive.org/

깃헙 말고도 파트너가 제법 많네요.
?
루나프레야 2020.07.19 16:47

제가 짠 코드도 저기에 있겠군요..
cowper 2020.07.20 10:36

근데 역사적으로 검증된 자료 저장 방법은 돌에 새기는거라던데.............................
AdorableZ 5等級の花婿 2020.07.20 10:46

맞습니다. 아이러니하게도 가장 오래가는 저장방법은 아날로그중에서도 가장 무식한 방법이죠...
Precompile 2020.07.20 22:53

TB단위로 새길 기술은 전혀 무식하지 않다는 게 유머죠... 사실 팔만대장경 몇 채 급으로 쌓아올리면 아날로그만으로 달성할 수 있긴 합니다.
카토메구미 카토릭교 신자 입니다.! 카토는 언제나 진리 입니다. 2020.07.20 14:28

아앗 저도...
Semantics ε=ε=ε=(~￣▽￣)~ 2020.07.20 22:26

아앗 저도...(2)

작성된지 4주일이 지난 글에는 새 코멘트를 달 수 없습니다.

No Image

EU, 틱톡의 미성년자 보호 의무 위반 조사

EU는 틱톡이 미성년자를 보호하는 의무를 위반했을 가능성에 대해 조사하고 있습니다. 성인 인증, 중독성 있는 디자인과 화면 표시 시간 제한 등을 거론하고 있는데요. 이런 식으로 치면 유튜브니 쇼츠도 똑같이 때려야 하지 않나 싶네요.

Date2024.02.21 소식 By낄낄 Reply0 Views216

Read More
No Image

일본도 코로나 백신 접종 증명 앱의 서비스 중단

일본 디지털청은 신종 코로나 백신 접종 증명서 앱의 서비스를 3월 31일에 중단한다고 발표했습니다. 접종 증명서를 필요로 하는 곳이 없어져서 그렇다네요. 한국 뿐만 아니라 전 세계가 이런 서비스는 정리하는 분위기인가 봅니다.

Date2024.02.20 소식 By낄낄 Reply2 Views580

Read More
No Image

애플, 음악 스트리밍 사업 독점으로 유럽에서 5억 유로의 벌금 부과

애플이 유럽 연합에게서 5억 유로의 벌금을 부과받았습니다. 웹에서 구매하는 스포티파이 구독이 애플 뮤직과 경쟁하고 있는데, 앱 스토어를 통해 애플 기기에서 구매한 스파티파이 구독 서비스는 30% 수수료가 붙으면서 경쟁력이 떨어진...

Date2024.02.20 소식 By낄낄 Reply1 Views578

Read More
No Image

104초만에 윈도우 10을 설치

윈도우 10의 용량을 줄인 타이니10 빌드는 104초만에 설치가 끝납니다. 일반적인 윈도우 10은 20~30분이 걸린다고 하네요. 빠른 스토리지와 램을 사용하고 상당량의 최적화가 더해졌기에 가능한 속도입니다.

Date2024.02.19 소식 By낄낄 Reply5 Views2911

Read More
이제 더는 단순한 파일 복사/붙여넣기로는 순정 윈도 11 설치 드라이브를 만들 수 없습니다.

윈도 11의 ISO는 윈도 10보다 파일 용량이 확실히 큽니다. 위의 것은 ISO를 곧바로 내려받은 것이고, 아래는 설치 미디어 생성 도구로 ISO를 생성한 것입니다. 특히 WIM/ESD 파일의 크기가 정말 커졌습니다. WIM ...

Date2024.02.18 테스트 Bymilsa Reply19 Views1553

Read More
타 가맹점은 Apple과 달리 분실카드 사용 수사에 적극 협조

[언론 보도] 관련 글 1 - 도둑맞은 카드로 물건 샀는데‥'나 몰라라' 애플 매장 https://gigglehd.com/gg/soft/15548056 관련 글 2 - 또 애플 매장에서 분실카드 사용‥경찰 "동일범 추정" https://gigglehd.com/gg/soft/15576395 분실카드 ...

Date2024.02.17 소식 By임시닉네임 Reply14 Views1432

Read More
No Image

현재로서는 사칭 광고에 뚜렷한 대응 방법이 없음

[언론 보도] 관련 글 - "Meta, 사칭 광고 도용 피해자에 공개 사과" https://gigglehd.com/gg/soft/15318673 사칭광고 대책이 자율규제? 슈카 "피해자에게 사과·보상한 적 있나" 피해자 사례부터 적고 시작하겠습니다. 경제 유튜버 전석재...

Date2024.02.17 소식 By임시닉네임 Reply6 Views668

Read More
덕덕고, 비공개 동기화 기능 제공

덕덕고 브라우저가 비공개 동기화 기능을 제공합니다. 스마트폰, 태블릿, 컴퓨터에 설치된 덕덕고 브라우저 사이에서 북마크, 비밀번호, 이메일 보호 설정을 동기화하는데, 계정을 만들고나 로그인할 필요가 없이 동기화가 된다는 게 특징...

Date2024.02.17 소식 By낄낄 Reply1 Views686

Read More
No Image

마이크로소프트 퍼블리셔, 26년 10월에 지원 중단

마이크로소프트가 2026년 10월부터 디자인 소프트웨어인 퍼블리셔의 지원을 중단한다고 발표했습니다. 그러니 그 때에 나올 오피스 후속작에서는 퍼블리셔가 빠지게 됩니다. MS는 출판물이나 웹디자인 같은 퍼블리셔의 주요 기능을 다른 ...

Date2024.02.17 소식 By낄낄 Reply1 Views538

Read More
AV테스트의 윈도우용 안티 바이러스 프로그램 테스트

AV테스트의 윈도우용 안티 바이러스 프로그램 테스트입니다. 예전에는 이거 매달 올렸었는데 아직도 하고 있었군요. 11월부터 12월 사이에 4주 동안 발견된 210개의 제로데이 취약점과 12000개의 악성코드 샘플을 사용해서 테스트했습니다...

Date2024.02.17 소식 By낄낄 Reply11 Views755

Read More
구글의 AI 제미나이, 2달만에 1.5 버전 발표

구글이 제미나이 AI의 새 버전인 제미나이 1.5를 발표했습니다. 개발자나 기업용으로는 제미나이 1.5 프로 프리뷰 버전을 이미 제공 중입니다. 제미나이 1.5 프로에 MoE(Mixture-of-Experts) 아키텍처를 도입해 효율적인 학습과 서비스가 ...

Date2024.02.17 소식 By낄낄 Reply1 Views439

Read More
오픈AI, 동영상을 만드는 AI인 소라

오픈AI가 문장이나 이미지를 재료로 최대 60초의 동영상을 만드는 생성 AI인 소라(Sora)를 발표했습니다. 아직까지는 개발 중이며 일부 관계자만 쓸 수 있고 전체 공개는 하지 않았습니다. 어떤 걸 원하는지를, 그것이 어떻게 표현되는지...

Date2024.02.17 소식 By낄낄 Reply5 Views992

Read More
No Image

포트 포워딩 질문 드립니다.

SKB를 사용하고 있고 장비는 SKB에서 기본 제공한 H614G, GW-ME6110 입니다. 세팅은 H614G는 브릿지모드로 셋팅하고 하부에 GW-ME6110을 둔 상태입니다. 여기서 마인크래프트 포트 오픈이 안됩니다. 아니..어떤 포트든 안 열립니다. 아래 ...

Date2024.02.16 질문 By나는나라구요 Reply2 Views304

Read More
No Image

요즘 유튜브가 참을수 없을만큼 느립니다.

요즘 PC에서 유튜브를 들어가면 정말 정말 느립니다. 이게 특정 PC에서만 그런게 아니고, 제가 가지고 있는 PC에서 다 그럽니다. 유튜브 메인 페이지만 들어가도 CPU 사용률이 증가함. 미니PC나 노트북에서는 팬이 풀로드가 걸려서 알기...

Date2024.02.16 질문 ByMannaz Reply12 Views804

Read More
No Image

스타링크, 러시아가 쓰지만 돈이 우선

우크라이나에서 러시아가 스타링크가 쓰이고 있고, 오래되었다고 주장하고 있습니다. 스타링크 측은 '우린 안팔았고, 어케 저케 넘어감' 이라고 하는군요. 근데, 단말기가 넘어가도 그 단말기를 밴 해버리면 되는것이 아닌가 싶네요 여...

Date2024.02.16 소식 By책읽는달팽 Reply5 Views781

Read More