Skip to content

기글하드웨어기글하드웨어

커뮤니티 게시판 : 아주 기본적인 네티켓만 지킨다면 자유롭게 쓸 수 있는 커뮤니티 게시판입니다. 포럼에서 다루는 주제는 각각의 포럼 게시판을 우선 이용해 주시고, 민감한 소재는 비공개 게시판이나 수상한 게시판에, 홍보는 홍보/외부 사용기 게시판에 써 주세요. 질문은 포럼 게시판의 질문/토론 카테고리를 사용해 주세요. 2016년 7월 이전의 글은 다음 링크를 참조하세요. 구 커뮤니티 게시판 / 구 공지사항 게시판 바로가기

profile
조회 수 1044 댓글 26

image.png

 

 

학교 연구실에 소규모 분산 스토리지를 연구하는 6대의 PC가 있습니다. 

 

프로젝트 자체는 제가 오기 전부터 진행중이던 것이라서 제가 해당 PC견적을 낼 때 없었지만서도... 

 

필요한 장비를 덕지덕지 추가하다보니... PCIe Lane 수가 부족합니다. ;;; 

 

intel 9세대 9700k + z370 조합입니다만, 어찌해도 lane수가 애매하네요. 

 

nvme x4, optane x4, RDMA x8, 10Gb ethernet x4인데.... 간신히 CPU에서 나오는 20개 lane수는 맞췄습니다만... 

 

x4 가 사실은 칩셋에 할당된 물건이라는 함정이 있었군요. 

 

사실 웬만해서는 칩셋쪽 대역폭까지 완전히 필요로 하는 경우는 잘 없지만, RDMA 장비가 주가 되는 고성능 분산스토리지 연구용이라서 x8 장비 1:1 최고 속도가 6400MB/s 정도 나옵니다.

 

물론 parallel연결이나 wrapping 하는 과정에서 성능하락이 있지만, 결국 받쳐주는 다른 기기도 못해도 lane 수 만큼의 속도는 나와줘야 하는데... 칩셋 거치면 아무래도 성능 하락이 심하더군요 거진 반토막(...) 나머지 중 가장 적은 대역폭을 사용하는 10GB 이더넷 마져도... 

 

이제 실험할 때 마다 PCI 장비를 교체해야 하는 번거로움이(.....)

 

 

 

p.s 이거 모르고 열심히 지금까지 뽑은 결과가 휴짓조각이 된 것도 안 자랑 입니다.;;;; 



  • profile
    낄낄 2020.08.12 02:58
    이런 곳에는 워크스테이션을... 비싸겠지만요.

    생각해보니 PCIe 4.0을 PCIe 3.0 여럿으로 나눠주는 그런 장비는 없으려나요.
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 03:03
    아무래도 처음부터 이런 상황을 고려하지 않은 것 같습니다(...)
    물론 알았다고 해도 intel 라이브러리를 쓰는 부분이 있어서..... AMD 플랫폼이 불가능 했으니 X 라인업으로 맞췄다면 좋았겠지만요....;;
  • ?
    미주 2020.08.12 03:05
    DMI3.0이 PCIE3.0 x4정도밖에 안되니 그 밑에 물린 장비들은 제성능이 안나오죠대역폭+레이턴시로 인해....
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 03:07
    그....그래도 칩셋쪽 i/o에 아무것도 없이 10Gb 정도 물리는건 괜찮겠지 싶었는데....
    10Gb 이더넷이... 6Gb 정도 나오더랍니다. ㅠ
  • profile
    title: 흑우BEE3E3      idolm@ster.email 2020.08.12 03:05
    데스크탑 라인업의 한계&제온 라인업의 존재의의죠.
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 03:12
    사실 그렇죠. X라인, Xeon라인의 의의는 코어수뿐만 아니라 빠방한 i/o 지원이....
    AMD TR 3세대는 4.0 72개 lane 이라던데 말이죠 ....ㄷㄷ
  • profile
    title: 흑우BEE3E3      idolm@ster.email 2020.08.12 03:14
    72개;;;; 무섭네요...
  • ?
    its      시도 때도 없이 잠수.... https://crazyits.tistory.com/ 2020.08.12 03:24
    AMD EPYC로 가시면 됩니다..

    PCIe 4.0 x128 ...........
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 11:02
    킹치만.... 그럼 예산은 차치하고서라도 잉텔의 AVX기반 라이브러리를 사용할 수 없게 됩니다....;
  • ?
    its      시도 때도 없이 잠수.... https://crazyits.tistory.com/ 2020.08.12 13:41
    작년에 나온 이야기이긴 하지만...
    MKL 라이브러리에 관련되어 인텔이 못된 짓을 하고 있었다는 이야기입니다.. 참고하세요...

    기글 어딘가에도 올라왔던 적이 있는...

    https://www.reddit.com/r/matlab/comments/dxn38s/howto_force_matlab_to_use_a_fast_codepath_on_amd/

    https://www.extremetech.com/computing/302650-how-to-bypass-matlab-cripple-amd-ryzen-threadripper-cpus

    http://www.swallowtail.org/naughty-intel.shtml
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 15:25
    정확히 말하면... 저희가 필요한것은 ISA-L 이라는 AVX 기반에 인텔이 Wrapping을 추가로 했던 라이브러리라서요...;;
  • profile
    title: 야행성레이첼로즌 2020.08.12 03:40
    X99 조와요..
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 11:03
    최근에 다른 연구용으로 할당된 x299 + 10980xe 조합은 엄청 좋더라구요. Quadro 2개를 풀스피드로....!
  • ?
    title: 명사수로리링 2020.08.12 08:16
    저도 인텔 레인땜에 머리굴린적이 있엇죠
    좀넉넉하게 만들어주지 보급형부터 진짜 너무 짜요
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 11:05
    사실.... 이건 AMD도 NVME 전용 라인이 하나 더 있는거 제외하면 비슷했었으니...
    결국 상위라인업 티어 나누기가 이런 부분인 것 같습니다... ;
  • profile
    책사랑벌레      아직은 살아있는 회원입니다./사람을 관찰 2020.08.12 08:21
    와.. 이건 개인적으로 쓸 때는 한 번도 고려하지 않았던 사유군요.
    그 레인이 부족할 수가 있다니...
  • ?
    포인트 팡팡! 2020.08.12 08:21
    책사랑벌레님 축하합니다.
    팡팡!에 당첨되어 5포인트를 보너스로 받으셨습니다.
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 11:07
    사실 저도 진행하면서 이렇게 덕지덕지 달게 될줄은 몰랐습니다(...)
    그래서 처음부터 참가했었더라도 상황은 비슷하지 않을까나.... 합니다.;;;
  • profile
    Loliconite      호에엥 2020.08.12 08:34
    킹텔에서 PCIE가 고프면 HEDT 가야함다;;
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 11:07
    확실히 킹텔이... 장사 하루이틀 하는것 아니다보니 라인업은 귀신같이 나누어두죠...
  • ?
    steve 2020.08.12 08:46
    인텔계열에서 NVME RAID 0하고 보니 속도가 같아서 ???했더니 DMI 3.0병목이라 에잉하고 팔았습니다
    + 로켓레이크는 DMI가 8레인으로 늘어난다고하니 로켓레이크를 사시는게..?
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 11:09
    사실 이론상 DMI속도 대비 사용 대역폭이 절반도 안되는데 상황이 저런 것을 보면....
    일단 칩셋 거치면 정상 속도는 기대하기 어려운 것이 아닌가 합니다. ;;;
  • ?
    RuBisCO 2020.08.12 11:55
    사실 AMD도 유사한게 이론상으로는 AM4 플랫폼의 경우 CPU에서 32 레인이 나오는데 일부러 8개 레인을 죽여서 나왔죠.
  • profile
    title: 랩실요정ForGoTTen      결재중.... 2020.08.12 12:00
    그렇기는 했죠.... 그래서 설계상 마티스 + x570 (마티스의 i/o다이)조합은 PCIe Lane에서 엄청난 힘숨찐이.... ;;;
  • profile
    title: 야릇한poin_:D      .............? 2020.08.12 12:29
    불도져 노스브릿지 990fx시절 샌디익스트림 귓방방이 때리는 우람한 레인 가지고 있었는데...
  • profile
    가다랑어 2020.08.12 17:51
    x79 시절에는 막내들(3820, 4820)도 40레인 팍팍 넣어줬는데 99부터 막내는 28레인으로 깎아버렸죠
    코어 늘려줬으니 레인을 뺏어가는 전략인지..

작성된지 4주일이 지난 글에는 새 코멘트를 달 수 없습니다.


List of Articles
번호 분류 제목 글쓴이 날짜 조회 수
공지 이벤트 [23일] MSI 새로운 디자인의 장패드 증정 이벤트 2 file 낄낄 2020.09.18 297
42813 잡담 LTE 라우터 구매한게 도착 했습니다. 11 file 스파르타 2020.08.12 698
42812 잡담 iOS14 b4 안정성이 나빠졌네요 10 1N9 2020.08.12 495
42811 볼거리 핵무기도 없으면서 동북아에서 설치는 흑우 없제? 29 file 고자되기 2020.08.12 1178
42810 잡담 갤럭시탭s7 예구가 뜬거같습니다 14 file 유에 2020.08.12 1897
42809 볼거리 을지면옥 평양냉면 후기 21 file title: 문과호무라 2020.08.12 792
42808 잡담 노트20 울트라 간단 소감 31 히토히라 2020.08.12 653
42807 잡담 갤버라 실리콘 팁 저도 받았습니다 3 file 케닌 2020.08.12 373
42806 잡담 마음에 드는군요 6 file Retribute 2020.08.12 367
42805 잡담 이제 와서 갤럭시 s7 쓰려니 불편한 점 25 file title: 문과호무라 2020.08.12 1036
42804 볼거리 Arm맥 호환성...든든합니다 32 file TundraMC 2020.08.12 1267
42803 잡담 저번에 공유기 멈추는거 배치만 바꿔서 해결봤습... 1 file 오버쿨럭커 2020.08.12 283
42802 잡담 it기기 가격이 점점 올라가네요 ㅜ 12 리피 2020.08.12 600
42801 잡담 갤럭시 탭 S7+ 색상 고민 12 file Rufty 2020.08.12 432
42800 잡담 청년치매 때문에 노트20플러스를 갈까 고민중입니다. 9 슈베아츠 2020.08.12 510
42799 잡담 소나기도 엄청 매섭네요 2 file title: 야릇한poin_:D 2020.08.12 314
42798 잡담 엑스박스 얼티밋구독자도 엑스클라우드 무료이용... file 칼로스밥 2020.08.12 236
42797 등산로(장터) (완판)조탁 1060 3긱 / 코넥티아 m 스타일러스(cu... 8 file yamsengyi 2020.08.12 598
42796 가격 정보 파이슨 E12S 계열 OEM NVMe SSD 1TB 16만원 6 file title: 야릇한poin_:D 2020.08.12 726
42795 잡담 오늘의 지름 6 file title: 흑우BEE3E3 2020.08.12 533
» 잡담 PCIe 대역폭이 부족하더랍니다....;;;; 26 file title: 랩실요정ForGoTTen 2020.08.12 1044
42793 잡담 포럼에 소식 올리니 2시간이 훌쩍 11 file title: 하와와까마귀 2020.08.12 537
42792 잡담 버즈 라이브에 실리콘 이어팁이 있다네요 16 file 슈베아츠 2020.08.12 855
42791 잡담 Mi10 ultra가 DxO 1위 찍었다네요 24 file title: 하와와까마귀 2020.08.12 601
42790 잡담 기글에 오디오 카테고리가 있으면 좋겠어요 23 Mannaz 2020.08.12 455
42789 잡담 노트20 울트라 구매~ 3 file title: 월급루팡카토메구미 2020.08.12 353
42788 잡담 요새 가전제품 오픈마켓 사기가 성행하는군요 17 낄낄 2020.08.11 807
42787 잡담 PC스피커(버저) 업그래이드 14 file 뚜까뚜까 2020.08.11 564
42786 볼거리 러시아의 자동차 37 file title: 문과호무라 2020.08.11 968
42785 잡담 오늘의 삼성 매장 방문기 7 file andu 2020.08.11 532
42784 등산로(장터) 미개봉 LG 노트북 15U590 등산로 올립니다. 2 슈베아츠 2020.08.11 516
목록
Board Pagination Prev 1 ... 48 49 50 51 52 53 54 55 56 57 ... 1480 Next
/ 1480

최근 코멘트 30개
hqwac
08:01
레이첼로즌
07:59
poin_:D
07:33
hqwac
07:30
디렉터즈컷
07:16
포인트 팡팡!
07:16
꽃미녀추모중
07:16
디렉터즈컷
07:15
울트라메시징
07:14
디렉터즈컷
07:10
라데온HD6950
07:05
임시닉네임
06:58
슈베아츠
06:52
유자나무
06:48
아리스
06:40
슬렌네터
06:26
SPA게티
05:37
하루쿤
05:18
슬렌네터
05:15
하루쿤
05:10
WTH
05:03
포인트 팡팡!
05:01
하루쿤
05:01
레드팍스
05:00
WTH
04:57
하루쿤
04:55
WTH
04:52
WTH
04:51
하루쿤
04:50
WTH
04:48

MSI 코리아
지원아이앤씨
쓰리알시스템

공지사항        사이트 약관        개인정보취급방침       신고와 건의


기글하드웨어는 2006년 6월 28일에 개설된 컴퓨터, 하드웨어, 모바일, 스마트폰, 게임, 소프트웨어, 디지털 카메라 관련 뉴스와 정보, 사용기를 공유하는 커뮤니티 사이트입니다.
개인 정보 보호, 개인 및 단체의 권리 침해, 사이트 운영, 관리, 제휴와 광고 관련 문의는 이메일로 보내주세요. 관리자 이메일

sketchbook5, 스케치북5

sketchbook5, 스케치북5

나눔글꼴 설치 안내


이 PC에는 나눔글꼴이 설치되어 있지 않습니다.

이 사이트를 나눔글꼴로 보기 위해서는
나눔글꼴을 설치해야 합니다.

설치 취소