인터넷 / 소프트웨어 : 윈도우즈, 리눅스, 기타 운영체제, 각종 어플리케이션, 프로그램, 소프트웨어, 인터넷, 인터넷 서비스에 대한 이야기, 소식, 테스트, 정보를 올리는 게시판입니다.

소식

2020.07.18 11:37

깃허브 아카이브 프로그램, 북극에 21TB 데이터를 저장

이견 https://gigglehd.com/gg/7801323

페미니스트입니다만 문제라도?

조회 수 2243 댓글 25

Extra Form
참고/링크	https://github.blog/2020-07-16-github-ar...he-arctic/

GitHub는 2019년 11월 깃허브 북극 코드 저장소(GitHub Arctic Code Vault)와 깃허브 아카이브 프로그램을 발표했습니다. 주요 기관과 협력하며 미래 세대를 위해 최소 천 년간 코드를 보존하는 계획입니다.

GitHub Archive Program

16일 깃허브는 2020년 2월 2일 모든 공개된 활성 저장소 스냅샷을 저장했고, 아카이브 파트너 Piql을 통해 이를 필름에 기록했으며 7월 8일 스발바르에 있는 북극 코드 볼트에 자료를 성공적으로 보관했다고 발표했습니다. 자료는 21TB 분량으로 디지털 감광 아카이브 필름인 piqlFilm 186개에 보존되었습니다.

(원 게시물에서 더 많은 사진을 확인할 수 있습니다.)

그리고 깃허브에서는 프로필 페이지에 북극 코드 볼트 뱃지를 추가했습니다. 마우스를 가져다 대면 기여한 주요 저장소가 표시됩니다.

한편 깃허브는 인터넷 아카이브, 소프트웨어 헤리티지 재단, 프로젝트 실리카와도 함께 방대한 분량의 자료를 보존했으며 앞으로도 지속적으로 이루어질 예정이라고 발표했습니다.

삭제 요청

TAG •

깃허브,

목록 스크랩

위로 아래로 댓글로 가기

Comments '25'

낄낄 2020.07.18 12:43

2020년 2월 2일 모든 공개된 저장소의 스냅샷을 저장한게 21TB군요. 깃허브에 올라온 코드의 양이 어마어마할텐데, 이미지나 영상이 아닌 코드라서 그런가 실제 차지하는 용량은 그렇게 크지 않군요.
쮸쀼쮸쀼 2020.07.18 20:07

정말로 [모든]은 아니고, 다음 기준에 맞는 경우에만 이번 북극 코드 저장소에 포함되었습니다.

* 2019년 11월 13일부터 2020년 2월 2일 사이 한번이라도 Commit을 한 저장소
* 2019년 2월 3일부터 2020년 2월 2일 사이에 하나라도 Star를 받은 저장소
* 250개 이상의 Star를 받은 저장소

그리고 Github에 이미지 같은 바이너리 파일을 올리는 경우도 흔한데, 이런 경우는 100KB 이상의 파일일 경우 Star를 받은 수에 비례하여 파일을 보존하였다고 합니다.
검사 BLACK COW IN YOUR AREA 2020.07.18 13:27

북극은 아둔의 창이 되어가네요.
슬렌네터 Human is just the biological boot loader for A.I. 2020.07.18 22:14

가슴이 웅장해지네요
?
Legendof61 2020.07.18 22:17

21TB인데 저렇게 번잡하게 하나요?

그냥 HGST HDD나 ioDrive 빡빡한거 혹은 100TB(님버스 데이타에서 나온거죠...) SSD 몇개 레이드 걸면 끝날거 같은데...
https://www.techradar.com/news/at-100tb-the-worlds-biggest-ssd-gets-an-eye-watering-price-tag
Precompile 2020.07.18 22:32

깃헙 측에서 PB랑 헷갈린 게 아닐까요? 솔직히 이미지 파일도 포함하는데 21TB는 심하게 작습니다.
?
Legendof61 2020.07.18 22:35

개인적으로 PB까지는 모르겠고...

이미지 들어가면 최소로 잡아도 100TB는 넘어갈거 같고 NAS 굴려본 작은 경험에서 추론하면 저정도 필름으로 어찌 저장하는지는 모르겠지만 10카피 떠놔도 LTO-8 같은 솔루션 쓰면 PB급 같은데요... LTO-8 그 작은 카트리지에 비압축으로 1.5TB 담는걸로 아는데 10장씩 카피 떠놔도 테이프 부피가 박스 하나정도 나오지 않을까요...
?
nsys 2020.07.19 00:18

밀도 높은데 재기록 가능하면 내구성이 떨어지죠
깃헙 아카이브 목표는 100년 수준도 아니고 영구 보관입니다.
본문 링크 타고 들어가 보시면 마이크로 필름 형태로 저장 된게 보입니다
그리고 문명이 붕괴됐을때를 대비한거라 현대의 초고집약적 센서 기술 필요하지 않게 저밀도로 기록 했고요.
?
Legendof61 2020.07.19 00:20

그래서 자기테이프 생각하고 봤는데... 밑에 댓글 보니 천년 보관에는 부적합한가 보군요. 필름으로 디지털 정보 저장이라...

이제 저 부피가 이해가 갑니다.
쮸쀼쮸쀼 2020.07.19 10:16

다른 분들이 이미 설명하셨지만, 조금 더 부연설명하자면 다음과 같습니다.
저기 들어간 것은 총 201개의 마이크로필름 릴입니다. 각 릴은 65,000개의 프레임을 담고 있고요. 200개의 릴에는 압축된 바이너리 데이터가 QR코드 형태로 기록되어 있고, 나머지 1개의 릴에는 여기 들어간 데이터를 어떻게 읽을 수 있는지와 이게 어떤 데이터인지를 설명하는 내용이 영어, 중국어, 힌두어, 스페인어, 아랍어로 들어가 있습니다. 이런 마이크로필름은 축소비율을 높이면 그만큼 판독하기가 어렵고, 이번 저장의 목적 자체가 [만일의 사태를 대비해 최소한의 기술 역량으로 판독할 수 있는 데이터 저장소 구축]이기 때문에 너무 축소를 하는(=저장 밀도를 높이는) 것도 좋지 않습니다. 저장 밀도를 대략적으로 계산해보면 한 프레임에 대략 1.5~1.7 MB 정도 담은 것 같네요. QR코드 하나는 바이너리 데이터를 최대 2,953바이트 담을 수 있다니까, 이 추측대로라면 필름 프레임 하나에 담은 QR코드는 대략 550~600개 정도인 것 같습니다.
?
Legendof61 2020.07.19 12:04

일반적으로 보지 못한 저장 기술이군요. 쉬워보이기도 하고 고비용 저장장치 같기도 하네요.

설명 감사합니다. 잘 읽고 갑니다.
쮸쀼쮸쀼 2020.07.19 13:56

사실 QR코드를 이용한 디지털 데이터 저장이라는 점을 제외하면, 저기에 사용된 마이크로필름 기술 자체는 오래 전부터 쓰던 것입니다. 예를 들면 과거에는 오래된 신문나 잘 찾아보지 않는 서적 등의 내용을 보존할 때 마이크로필름에 축소 촬영을 하는 방법을 많이 사용했습니다. 지금도 크고 오래된 도서관에서 옛날 신문기사를 확인할 때는 마이크로필름 아카이브에서 필름 릴을 판독기에 걸어서 뒤지곤 합니다. 종이로 된 원본 자료에 비하면 부피를 최소 수백분의 1로 압축할 수 있고, 사진술에서 파생되어 이미 19세기부터 시작되었던 기술이라 보존성이 어느 정도 검증되었으며, 내용을 확인하기 위해서는 기본적인 광학 기술만 있으면 됩니다. 그리고 저게 보존성이나 비용 등을 생각하면 종이에 직접 인쇄하는 것보다는 저렴하고 좋습니다.
?
NPU 2020.07.21 11:53

부연설명 감사합니다
?
고대문명꾸꾸꾸 2020.07.18 23:49

프로젝트 홈페이지에 들어가보시면
SSD, HDD, 자기테이프 등이 천년가는 내구도를 보장하지 못하니
빛으로 디지털 코드를 인쇄한 필름을 사용했다고 나오네요.
?
joyfuI 2020.07.19 00:20

생각보다 용량이 작네요? 전세계 코드가 고작 21TB...?
?
analogic 2020.07.19 01:44

북극 얼음 녹아 없어질 전망이라는데 북극은 좀 안맞는 장소 같군요.
?
고자되기 2020.07.19 01:48

역시 교통비가 좀 들더라도 태양이 오래갈거 같습니다
?
analogic 2020.07.19 13:48

북극 해빙 문제는 현실적으로 진행중 입니다.
북극해 녹으면서 그쪽 항로 개척되고 북극 주변 국가들은 북극해 쪽으로 영해 넓히려는 움직임이 있습니다.
북극지방의 빙하가 녹아 없어지는게 몇십년 정도만으로도 확연히 달라질 정도로 급격히 진행중 입니다.
저런 자료 보관하는 곳은 이제 북극쪽이 아니라 남극점 근처를 생각해봐야 될 시점이 다가오고 있다고 봅니다.
Loliconite 3939퓨어퓨어 2020.07.19 02:00

https://www.arcticworldarchive.org/

깃헙 말고도 파트너가 제법 많네요.
?
루나프레야 2020.07.19 16:47

제가 짠 코드도 저기에 있겠군요..
cowper 2020.07.20 10:36

근데 역사적으로 검증된 자료 저장 방법은 돌에 새기는거라던데.............................
AdorableZ 5等級の花婿 2020.07.20 10:46

맞습니다. 아이러니하게도 가장 오래가는 저장방법은 아날로그중에서도 가장 무식한 방법이죠...
Precompile 2020.07.20 22:53

TB단위로 새길 기술은 전혀 무식하지 않다는 게 유머죠... 사실 팔만대장경 몇 채 급으로 쌓아올리면 아날로그만으로 달성할 수 있긴 합니다.
카토메구미 카토릭교 신자 입니다.! 카토는 언제나 진리 입니다. 2020.07.20 14:28

아앗 저도...
Semantics ε=ε=ε=(~￣▽￣)~ 2020.07.20 22:26

아앗 저도...(2)

작성된지 4주일이 지난 글에는 새 코멘트를 달 수 없습니다.

No Image

윈도우 10의 유료 보안 업데이트, 25년 이후 61달러

마이크로소프트는 윈도우 10을 윈도우 11로 업그레이드하라고 권고하지만, 윈도우 10을 유지하길 원하는 기업도 있습니다 그런 곳을 위해 마이크로소프트는 유료 업데이트를 제공하는데요. 2025년 10월 14일에 윈도우 10의 업데이트 제공...

Date2024.04.05 소식 By낄낄 Reply0 Views839

Read More
일본의 유명 기업인이 메타의 사기 광고를 비판

마에자와 유사쿠는 일본의 유명 기업가로, 일본에서 가장 큰 온라인 패션 소매 사이트인 조조타운을 설립했습니다. 이 사람이 자신을 포함해서 여러 유명인의 사진을 도용한 사기 광고가 페이스북과 인스타그램에 꾸준히 올라온다면서, 페...

Date2024.04.05 소식 By낄낄 Reply10 Views2019

Read More
오페라, 로컬에서 AI를 실행하는 기능 추가

오페라가 대규모 언어 모델을 다운로드해서, 인터넷 연결이 아닌 로컬 디바이스에서 직접 AI를 처리하는 기능을 추가했습니다. 웹 브라우저에 이런 기능이 추가된 건 처음이라고 합니다. 50여종의 모델 패밀리, 150개의 LLM을 선택할 수 ...

Date2024.04.05 소식 By낄낄 Reply6 Views1308

Read More
아마존, 2023년에 7백만개 이상의 위조품을 압수

아마존이 2023년에 7백만개 이상의 위조품을 압수했다고 발표했습니다. 머신 러닝 모델을 사용해 로고가 위조된 것이 맞는지를 빠르고 정확하게 검출하고, 다양한 인증 기술을 추가해 악의적인 새 계정 추가를 막았다고 합니다.

Date2024.04.05 소식 By낄낄 Reply0 Views300

Read More
No Image

Temu, 국내 법인 설립

[언론 보도]//soft_3 관련 글 1 - "쿠팡, '천원마켓'까지…알리·테무와 전면전" https://gigglehd.com/gg/soft/15780932 관련 글 2 - "알리바바 그룹, 연내 국내 물류센터 구축 예정" https://gigglehd.com/gg/bbs/15695901 'e커머스 교란...

Date2024.04.04 소식 By임시닉네임 Reply2 Views632

Read More
No Image

AMD, 더 많은 라데온 소프트웨어를 오픈소스로 제공하겠다고 약속

AMD가 더 많은 라데온 소프트웨어를 오픈소스로 제공하고, 하드웨어 문서도 더 많이 제공하겠다고 약속했습니다. 구체적인 일정이나 공개 범위는 밝히지 않았으나, 내부적으로 계획이 있으니까 이렇게 글을 올렸을 것 같네요.

Date2024.04.04 소식 By낄낄 Reply11 Views1078

Read More
No Image

아마존의 저스트 워크 아웃 계산대, 운영 중단

아마존의 슈퍼마켓인 아마존 프레시는 물건을 들고 그냥 걸어 나가면 계산이 끝나는 '저스트 워크 아웃'이라는 기능을 폐지하고 있습니다. 이 기능은 카메라와 센서를 사용해 제품의 QR 코드를 스캔해, 따로 결제하지 않아도 자동...

Date2024.04.04 소식 By낄낄 Reply12 Views2144

Read More
No Image

쿠팡, '천원마켓'까지…알리·테무와 전면전

쿠팡은 최근 1000원~3000원대 저가형 상품을 모아 '천원마켓' 기획전을 열었다. 로켓배송 가능 상품을 중심으로 물티슈, 세제 등 생활필수품부터 충전기·주방용품 등 생활 잡화까지 판매한다. 알리익스프레스가 운영하는 &...

Date2024.04.03 소식 By낄낄 Reply7 Views926

Read More
No Image

구글, 크롬의 시크릿 브라우징 수집 데이터를 삭제

구글은 크롬 브라우저의 시크릿 모드를 사용한 고객에게서 수집한 데이터를 삭제해, 2020년에 시작된 집단 소송을 해결했습니다. 크롬의 시크릿 모드는 매우 안전하고 비밀을 지켜주는 것 같지만, 실제로는 데이터를 수집해 웹사이트 사용...

Date2024.04.03 소식 By낄낄 Reply7 Views1074

Read More
No Image

MS, 오피스에서 Teams를 분리

마이크로소프트가 오피스에서 Teams를 분리합니다. EU의 반독점 벌금을 피하기 위해서 유럽 시장에서 먼저 분리했었는데요. 이제는 전 세계를 대상으로 분리 작업을 합니다. 그래서 마이크로소프트 365나 오피스 365에 tEams가 포함되지 ...

Date2024.04.03 소식 By낄낄 Reply4 Views884

Read More
No Image

챗GPT, 계정 없이 사용 가능

오픈AI가 챗GPT를 회원 가입이나 로그인을 하지 않고도 쓸 수 있게 바꿨습니다. 로그인을 하면 채팅 이력, 채팅 공유 등의 추가 기능을 쓸 수는 있지만, 기본적인 채팅에는 아무 제한이 없습니다.

Date2024.04.03 소식 By낄낄 Reply1 Views524

Read More
No Image

미국 “한국 ‘망 사용료 법안’ 반경쟁적…과일 검역도 풀어야”

미국 무역대표부가 정보통신망 이용요금, 이른바 망 사용료를 콘텐츠 사업자에게 부과하는 법안이 경쟁 원칙에 어긋난다며 재차 문제를 제기했습니다. 미국 무역대표부가 발표한 올해 국가별 무역장벽 보고서는 2021년부터 외국 콘텐츠 제...

Date2024.04.03 소식 By낄낄 Reply7 Views739

Read More
3D마크 스틸 노매드, 4월로 연기

3D마크 스틸 노매드와 스틸 노매드 라이트의 출시가 2분기 초로 연기됐습니다. 4월 중에는 나올 거라고 합니다. 레이 트레이싱을 쓰지 않는 최신 그래픽 테스트이자, 크로스 플랫폼 벤치마크라는 특징이 있습니다.

Date2024.04.02 소식 By낄낄 Reply2 Views335

Read More
No Image

성공신화 쓴 창업주, 매각 이유는 이커머스?

피자나라치킨공주 운영사인 '리치빔'이 매물로 등장하면서 요식업 성공신화를 써 온 창업자 남양우 대표의 지분매각 배경에 시장 이목이 쏠리고 있다. 업계 전문가들은 남 대표가 리치빔 매각 이후에도 신규 사업을 진행할 가능성...

Date2024.04.02 소식 By낄낄 Reply3 Views667

Read More
No Image

유튜브, 유명인 사칭 시 계정 정지

스타강사 김미경 씨와 유명 투자자인 존 리 전 메리츠 자산운용 대표 등이 참석한 기자회견 온라인에서 유명인 사칭 광고 사기가 기승을 부리자, 정부와 플랫폼 기업들이 적극 나서줄 것을 호소하는 자리였습니다. (중략) 이날 성명에는 ...

Date2024.04.02 소식 By낄낄 Reply12 Views544

Read More
No Image

1일부터 MVNO 회선 신규 개통 시 신분증 스캐너 사용 의무화

[소식] 휴대폰 집단상가 가보니…"오늘부터 알뜰폰 개통 안돼요" [현장에서] 아이뉴스24 보도입니다. 2024년 4월 1일부터 MVNO 회선 신규 개통 시 신분증 스캐너를 의무적으로 사용하도록 규정이 바뀌었습니다. 참고/링크에 올려 둔 기사는...

Date2024.04.02 소식 By임시닉네임 Reply12 Views674

Read More
2024 어도비 서밋, 스닉에서 발표한 기능

어도비 서밋 2024에서 어도비 클라우드를 위한 새로운 기능이 발표됐습니다. 어도비 익스피리언스 플랫폼 AI 어시스턴트입니다. 고객 체험 관리를 위한 어도비 익스피리언스 클라우드에 추가되는 기능으로, 자연어를 지원하는 AI 어시스턴...

Date2024.04.01 소식 By낄낄 Reply1 Views398

Read More
No Image

오픈AI와 MS, 1000억 달러의 데이터센터 프로젝트를 계획 중

오픈AI와 마이크로소프트가 1000억 달러를 투자해 수백만개의 GPU를 갖춘 데이터센터를 건설하는 프로젝트, 이름하여 스타게이트를 추진 중입니다. 현재 운영하는 가장 큰 데이터센터보다 100배 정도 더 비쌀 것이라고 하며, 2028년까지 ...

Date2024.04.01 소식 By낄낄 Reply3 Views474

Read More
MS의 Copilot 정책 - 인터넷 연결없이도 가능하게

일단, 3월 21일날 MS가 첫 'AI PC'를 내놓았습니다. 이 AI PC의 정의에 대해서 인텔은 'NPU와 VNNI 및 Dp4a 명령를 처리할수 있는 최신 GPU'를 장착한 컴퓨터란 답변을 했습니다. https://www.theregister.com/2024/03/12/what_is_an_ai_p...

Date2024.04.01 소식 By책읽는달팽 Reply3 Views940

Read More
NetBSD 10 공식 릴리즈

NetBSD 10이 공식 릴리즈 되었습니다. 2019년에 9가 나온 이후로 5년만입니다. 성능과 기능, 하드웨어 지원 모두 9.x에 비하여 크게 개선되었습니다. 자세한 내용은 원문에서 확인하시기 바랍니다.

Date2024.03.31 소식 By헥사곤윈 Reply0 Views540

Read More