자꾸 외국인이 물어봐서 쩝..
외국인에게 네트워크 구성을 공개했는데 이곳에 공개 안하기는 좀 그래서...
저의 네트워크 및 H/W 구성입니다.
factorn node 서버 2대와 GPU 연산서버 2대는 cado-nfs 클라이언트에 탑재되어 있고 프록시 서버는 저성능 PC 1대에 있습니다.
그래서 저는 총 13대의 PC가 있습니다.
자유
2024-01-22 23:23:41
fact0rn 저의 H/W 및 네트워크 구성입니다.
2314 6 15
댓글 15
-
?
-
?
@qookerj예 맞아요
client 는 runcadocli.sh 돌리는 pc로 마스터를 보는것이 4개입니다. 코어를 4개씩 분할해서 접속됩니다.
베포된 파일의 예제에는 3개로 되어 있지만 지금은 이렇게 구성되어 있습니다.
2개씩 겹치는 것을 보여주는 것은 아래 숫자이고 결국 마스터는 16코어 + 8코어씩 도는 거죠 -
?
@꼬로미Client 1대가 4대의 master에 연결한다?
그것도 중첩으로?? -
?
@qookerj예 맞아요.
그래야 어떤것이 멈추더라도 영향이 적어지기 때문에 이런 구성을 하곤 하죠. -
?
클라이언트 구성이 그야말로 쥐어짜는 구성이네요 ㅋㅋㅋㅋ
클라이언트들이 최대한 노는 시간을 줄여보려는 구성이랄까요...
예를 들어 16코어라도 8코어 + 8코어로 정확하게 나누어 놓으면 반드시
노는 시간이 발생하는데, 지금처럼 4개로 쪼개도 중복되는 PC들이
생겨서 노는 시간에 다른 애들이 치고 들어오게 구성해 놓으셨네요.
근데 이렇게 구성하면 단점이.... 어떤 놈들이 어떤 시간대에 치고 들어오느냐에
따라 더 많이 쪼개먹는 놈과 빼앗긴(?) 놈들이 생겨서 마스터들간에 시간편차가
커지더라고요. 채굴기 대수가 적을때는 당연히 클라이언트를 최소화시키는게
마스터를 늘리는 길이니까 본문의 방법이 좋은데 대수가 늘어날수록 최대한
시간편차를 적게 만드는게 좋아서 클라이언트에 다소 노는 시간이 생기더라도
고정 점유하게 하는게 결과가 좋더라고요.
참고로 저는 클라이언트가 가끔 연결이 끊기는 현상이 생기는 점을 조금
다른 방식으로 커버했습니다. 블럭타임이 일정 이상을 넘어가면 클라이언트가
재역할을 못한다고 판단하고 무조건 클라이언트쪽 cadocli 를 재시작시키도록
했습니다. -
?
@적왕슈리목적은 그런것은 아닙니다.
장애 분산이 목적입니다. ㅎㅎ
시간 편차가 생길수도 있지만 마스터의 숫자의 인수분해 속도 편차로 봐도 무방해 집니다.
실제로 단독모드로 해도 숫자에 대한 연산시간 편차는 340~440 사이에요.
그리고 쥐어짜는 형식으로도 사용하긴 했습니다.
가령 이런식이죠 16코어이지만 코어 분배를 6+6+6 이렇게도 했었습니다.
예외적으로 나누어서 나머지가 발생할때만 이렇게 합니다.
위의 것은 4,4,4,4 코어로 할당되어 있습니다. -
?
@꼬로미네 저도 이런 저런 실험을 엄청 해봤었습니다.
단일 블럭 타임이야 매번 편차가 발생하지만, 보통 최근 10개블럭을
기준으로한 평균값은 대부분 일정하게 유지되는 편입니다.
근데 쥐어짜는 식으로 중복 구성을 하면 ( 예를 들어 위 댓글에 적으신
6+6+6 구성시 두개의 마스터가 각각 6개씩 차지하면 남은 마스터는
4개밖에 못쓰게 되는 식 ) 뺏기는 마스터들이 생기는데 그것으로 인해
매번 블럭 타임에서 손해보는 놈들이 생기더라고요.
근데 이론적으로는 어쩔때는 뺏기다가 어쩔때는 더 빼앗기도 하면서
모든 놈들이 비슷해져야 하는데, 이상하게 늘 뺏기던 놈이 뺏기는
기이한 현상이 생기더라고요... 분명 세팅상으로는 그냥 랜덤해야 하는데... -
?
@적왕슈리적왕님은 몇대로 돌리세요?
-
현재는 pc를 이렇게 여러대 해야 나오는 수준인거죠?
7950x 2대 있는데 이걸로는 안되나요? -
?
@자유로운삶딱 그게 최소한의 구성입니다.
곧 풀이 나온다고 하는데요 약 1~3개월은 걸릴거에요. -
?
안녕하세요. 올려주신 프로그램 사용해보려고 하는데요. 검색을 통해서 node에 mine.sh 한개 +클라 runcadocli로 아는데 runcadocli.sh에 주석처리한 사용법 때문에 문의드립니다!
예를들면 4대의 PC에서 1번 mine.sh, 4번 mine.sh에 수행중에서 2번과 3번에서 클라1개는 runcadocli.sh(cadocli) / runcadocli.sh(screen cadocli)으로 다른IP에 동시에 수행하려면 어떤 방법으로 해야되는지 문의드려요! 처음 써보는 프로그램이라 무엇이 유효환지 확인방법이 없어서 문의드립니다.
runcadocli.sh(screen cadocli) 해당 내용으로 클라 추가하는 방법 문의드립니다! -
?
@상큼발랄끔찍백그라운드 실행하는 screen을 사용하지 않고 그냥 사용헤도 됩니다.
runcadocli.sh 를 복사해서 하나 더 만들고 $processes 를 해당 PC의 코어를 분리해서 지정하면 됩니다.
백그라운드 돌리는 방법중 하나인 screen 의 사용방법은
https://bio-info.tistory.com/42
참조하시면 됩니다. -
?
@꼬로미알겠습니다~ 아 그리고 제가 삽질했던 것중에 하나인데 mine.sh <- 포어그라운드만 되고 runcadocli.sh <- 백그라운드 수행해도 아직 이상 없는것 같아요! url주신 내용읽어보면 mine을 screen으로 돌리면 gui깔지 않고 수행 가능할듯 하네요!
-
뭔지는 모르겠으나, 멋지시네요. 정보 공유 추천드립니다.
-
?
잘보고갑니다
1~8 번까지 초록색 네모박스가 pc 8대를 뜻하는건가요?
Cado master node 가 8개면 mine.sh 를 켜는 pc 가 8대라는거죠?