[LLM] RTX4000 시리즈 Multi-GPU P2P 이슈 대응
앞서 RTX4090이 2개 설치된 워크스테이션을 설치해 개발을 시작했다. 대용량 LLM을 사용하려면 2개의 GPU에 샤딩된 모델을 업로드해야 한다. 그런데, PyTorch의 to 함수가 정상적으로 동작하지 않았다. 1개의 GPU만 사용하면 물리 메모리가 충분하지 않아 큰 LLM을 사용할...
앞서 RTX4090이 2개 설치된 워크스테이션을 설치해 개발을 시작했다. 대용량 LLM을 사용하려면 2개의 GPU에 샤딩된 모델을 업로드해야 한다. 그런데, PyTorch의 to 함수가 정상적으로 동작하지 않았다. 1개의 GPU만 사용하면 물리 메모리가 충분하지 않아 큰 LLM을 사용할...
Ubuntu 기본설치 WSL(Windows Subsystem for Linux)의 완성도가 높아졌다더라도, Native Linux만큼은 아니다. 사내 있는 컴퓨터다 보니 Windows + Docker/w Ubuntu 의 조합도 생각해 봤지만, 관리 요소만 더 추가될 뿐이라 생각했다. 1년 전에는 nVIDIA 드라이버의 문제로...
AWS SageMaker는 매우 고가의 서비스다. 회원 가입 시 2개월 50시간의 프리티어를 사용할 수 있지만, 모델이 커질수록 크레디트 소진속도가 빨라지기 때문에 계정 널뛰기 해야 한다는 단점이 있다. 불확실한 결과에 대해 비용을 투자하기는 쉽지 않기 때문에...
2018년식 JAGUAR XJ/XJL X351 3.0D 프리미엄 럭셔리 SWB(Short Wheel Base), 3.0D 프리미엄 럭셔리 LWB 그리고 3.0SC AWD LWB 스팩 비교 자료.
2008년 포드와 결별한 후 JLR에게는 프리랜더 대체 모델을 개발하는 것이 시급했다. 당시 레인지로버와 디스커버리를 위한 더 큰 D7u 아키텍처에 모든 리소스를 투입하고 있던 이 회사에게 기존과 다른 완전히 새로운 소형 플랫폼을 개발하는 것은 부담스러울...
공기 품질 센서 (Air Quality Sensor)는 캐빈 필터(Carbin Filter)가 걸러내지 못하는 오염 물질이 감지될 경우 공기 흡입 플랩을 열고 닫을 수 있도록 판단하는 신호를 전달하는 역할을 담당한다. 현대/기아 차량의 경우 센서가 없어도 네비게이션으로 판단해...
잘 사용하던 폰터스 HUD 정책 변화로 T-MAP을 사용할 수 없게 됐다. 그들은 대안으로 T-HUD 제조사가 개발한 MNEC를 공개했지만, 완성도가 높지 않아 제대로 사용하기 어려운 상황이다. 때문에 당분간 만도 맵피를 사용해야 한다. 맵피는 특이하게 금융권...
많은 오너들이 자동차 수리에 있어 한번 쯤 “이 부품 서비스 센터 가격은 얼마일까?” 생각해 봤을거라 생각한다. 보통의 경우 센터 어드바이저 또는 부품실만 가격을 알고 있을거라 생각하고 일찌감치 문의를 포기한다. 서비스 센터의 전화 통화 성공률...
JLR 코리아가 2리터 인제니움 디젤 엔진의 타이밍 체인 문제로 무상 수리를 실시하기로 결정했다. 이는 몇 개월 전 동사 디스커버리 스포츠와 이보크 차량 인제니움 엔진 무상수리의 연장선으로 세계 최초로 실시되는 사례다. 인제니움 2리터 디젤엔진은 알...
재규어/랜드로버(레인지로버) 3.0 디젤 엔진은 2개의 터보차저를 탑재하고 있는데, 그중 세컨드-터빈 누유는 성능 저하 뿐만 아니라, DPF 문제를 야기한다. 국내외 많은 오너들이 세컨드 터빈 누유 이슈를 재랜에 제보했고, 몇 차례의 현장 조사 결과를 내놓은 적...