커뮤니티 게시판 : 아주 기본적인 네티켓만 지킨다면 자유롭게 쓸 수 있는 커뮤니티 게시판입니다. 포럼에서 다루는 주제는 각각의 포럼 게시판을 우선 이용해 주시고, 민감한 소재는 비공개 게시판이나 수상한 게시판에, 홍보는 홍보/외부 사용기 게시판에 써 주세요. 질문은 포럼 게시판의 질문/토론 카테고리를 사용해 주세요.

잡담

2022.12.01 11:39

지옥의 유니코드 3대장, 정보 엔트로피 분석

책읽는달팽 https://gigglehd.com/gg/13349261

악은 사람을 사람취급 안하는데서 시작된단다 - Terry Pratchett

조회 수 575 댓글 5

https://www.irif.fr/~dxiao/docs/entropy.pdf

이런게 있군요... 대충 영어를 1에 놓고, 다른 언어의 엔트로피를 비교한 겁니다.

현대 정보이론에서 엔트로피는 정보의 양을 나타냅니다. 낮으면 정보량이 높고, 높으면 정보량이 드럽죠...

여튼, 중국어는 정보량이 높은데, 일본어는 생각보다 정보 엔트로피가 높군요... 40음도 아니었나... 그 와중 중간 조합문자(...)

삭제 요청

목록 스크랩

위로 아래로 댓글로 가기

Comments '5'

?
Proshares 2022.12.01 12:09

초록만 읽었는데 written natural language니까 한자쓰는 일본은 당연히 높지 않을까요? 개음절언어에 적은 모음개수같은 특징은 입으로 말을 할 때 각 음가의 정보량이 낮은거로 나타나는거겠고요.
책읽는달팽 악은 사람을 사람취급 안하는데서 시작된단다 - Terry Pratchett 2022.12.01 12:19

아… 성경이니, 그렇겠네요 쿨럭
?
유입입니다 Ryzen 5600 × Radeon RX6750XT 2022.12.01 12:09

한국어 역시 높네요
중국어는 너무 높고..
?
볶은완두콩 2022.12.01 13:02

너무높아서 오히려 문제...
?
Letrhee 2022.12.01 15:00

간단히 말해 같은 내용(성경)의 다른 언어 버전에서 텍스트 버전과 압축 버전의 용량을 비교한 것이군요.
한문은 뭐 생겨 먹은 자체가 그러니까 그러려니... 하는데, 한글이 깡패긴 하네요.

논문의 결론은 '압축하고 나면 결국 담고 있는 정보량에 맞게 용량이 나온다' 고요.
그 와중에 일본어만 유독 튀는 건 희한하긴 하네요. 아무래도 히라가나/가타카나 + 한자 2중 구성이어서 좀 손해를 보는걸까요?

작성된지 4주일이 지난 글에는 새 코멘트를 달 수 없습니다.

List of Articles
번호	분류	제목	글쓴이	날짜	조회 수
공지	공지사항	이젠 홍콩반점 바이럴인가? 46	낄낄	2023.08.23	4074
72100	퍼온글	하와와한 여중생쟝.. 4	AZUSA	2023.03.11	702
72099	잡담	잡담_230311: 기글하드웨어가 왜 다른지 알아보세요 6	임시닉네임	2023.03.11	414
72098	잡담	의외로 동아시아가 유럽보다 1000년 앞섰던 기술 8	유니	2023.03.11	896
72097	잡담	레라님이 나눔한 조이젠 블루투스 이어폰 수령 인증 4	검은숲	2023.03.11	260
72096	잡담	코알라님의 토익 단어책 나눔 인증입니다.	DontCut	2023.03.11	184
72095	잡담	열차안내방송이 고장났네요. 6	야메떼	2023.03.11	492
72094	잡담	중고 도시바 3TB 후기 그리고 ESXi 설치기 6	파팟파파팟	2023.03.11	853
72093	방구차	기글하드웨어에 글 올리면 어그로가 끌릴 제목 17	소주	2023.03.11	501
72092	잡담	극한님 나눔해주신 htomega 사카 잘 받았습니다 1	냐아	2023.03.11	167
72091	잡담	레라님께서 나눔해주신 aigo 쿨링팬x8...!! 3	라데니안	2023.03.11	209
72090	퍼온글	lg그램 의외의 구성품 5	유니	2023.03.11	969
72089	잡담	자장구 모셔왔습니다. 9	슈베아츠	2023.03.11	378
72088	잡담	환자 생활도 지겹네요. 6	Ι３3７	2023.03.11	505
72087	퍼온글	모바일 GPU 만와 3	Normie	2023.03.11	827
72086	퍼온글	은둔형 외톨이도 장애인이라고 하네요. 3	유니	2023.03.11	787
72085	잡담	빙(신) vs 챗GPT 2	아즈텍	2023.03.11	597
72084	잡담	사마귀 냉동치료 20	PLAYER001	2023.03.11	1085
72083	잡담	너.. 아직도 이런 게임 하니? 4	유니	2023.03.11	574
72082	퍼온글	아래의 경우처럼 생각보다 건축물 시공 오류(?)가... 3	cowper	2023.03.11	1922
72081	잡담	기글하드웨어의 결함이 드러났다! 이제 어떻게 할... 16	칼로스밥	2023.03.11	678
72080	퍼온글	어떤 신축 아파트의 콘센트/수도 설치 방법 14	낄낄	2023.03.11	912
72079	잡담	ChatGPT : 지글하드웨어, 버거킹 와퍼 무제한 이... 6	Marigold	2023.03.11	1666
72078	잡담	기글과 버거킹의 커넥션 의혹 3	까르르	2023.03.11	535
72077	잡담	왜 국뽕TV가 그렇게 많은지 알겠네요 5	Marigold	2023.03.11	811
72076	잡담	고대 한반도의 오파츠급 금속 유물 두개 10	유니	2023.03.11	2467
72075	잡담	스포티파이 써봤는데요 9	뚜찌`zXie	2023.03.11	577
72074	잡담	크로몰리 자전거.jpg 4	K_mount	2023.03.11	746
72073	잡담	현실적인 기글 인지도. 지글랜드나 구글 짝퉁이 ... 26	그림자	2023.03.11	1155
72072	잡담	유튜브 뮤직 나만 몰랐던 기능? 2	Kanyy	2023.03.11	913
72071	퍼온글	국내도입이 절실한 라트비아의 정책 11	RuBisCO	2023.03.11	1220