arXiv

1주 전 · devops

[Paper] OD-MoE: 온디맨드 전문가 로딩을 위한 캐시 없는 엣지 분산 MoE 추론

Mixture-of-Experts (MoE)는 대형 언어 모델(LLM) 아키텍처로서 상당한 장점을 제공하지만, 저‑…에 배치될 때 큰 도전에 직면합니다.

1주 전 · devops

[Paper] 고성능 인메모리 데이터 스트리밍 및 인시투 시각화를 하이브리드 MPI+OpenMP PIC MC 시뮬레이션에 통합하여 엑사스케일을 향해

복잡한 플라즈마 동역학의 효율적인 시뮬레이션은 핵융합 에너지 연구를 진전시키는 데 필수적입니다. Particle-in-Cell (PIC) Monte Carlo (MC) 시뮬레이션은 ...

1주 전 · ai

[Paper] BERnaT: 바스크 인코더를 통한 자연 텍스트 다양성 표현

Language models는 종종 품질을 위해 필터링되는 방대한 text corpora에 의존하는데, 이 과정에서 비표준 언어 변이를 의도치 않게 배제할 수 있다.

1주 전 · ai

[Paper] 향상된 트랜스포머를 위한 교차 레이어 퓨전을 통한 KV 캐시 재구성

Transformer 디코더는 다양한 작업에서 강력한 결과를 달성했지만, KV 캐시가 필요로 하는 메모리는 긴 시퀀스 길이에서 금지적이 된다. 비록 ...

1주 전 · software

[Paper] Markov Chain Monte Carlo 방법을 위한 Parallel Tempering 가속화

Markov Chain Monte Carlo 방법은 확률 분포를 샘플링하기 위해 사용되는 알고리즘으로, 물리·화학 시스템의 Boltzmann 분포를 샘플링하는 데 일반적으로 사용됩니다…

1주 전 · software

[Paper] Runnable Directories: Monorepo vs. Multi-repo 논쟁에 대한 해결책

현대 소프트웨어 시스템은 전통적인 코드베이스 조직 전략에 점점 더 큰 부담을 주고 있습니다. Monorepos는 일관성을 제공하지만 종종 확장성 문제를 겪습니다.

1주 전 · devops

[Paper] FFTrainer: 대규모 언어 모델 훈련에서 거의 무료 상태 관리와 빠른 페일오버

최근 대형 언어 모델(LLMs)의 발전은 효율적이고 견고한 학습에 대한 새로운 요구사항을 제시했습니다. LLM 클러스터가 규모가 커짐에 따라, 노드 실패, le...

1주 전 · devops

[Paper] 이중 엣지 지원 컴퓨테이션 오프로드 및 자원 할당을 위한 우주·공중·해양 통합 네트워크

본 논문에서는 space-air-marine integrated networks (SAMINs)를 위해 맞춤 설계된 double-edge-assisted computation offloading 및 resource allocation 스킴을 제안한다.

1주 전 · software

[Paper] HarnessAgent: 툴‑보강 LLM 파이프라인을 활용한 자동 퍼징 하네스 구축 확장

대규모 언어 모델(LLM) 기반 기술은 프로그램 퍼징을 위한 하네스 생성에서 눈에 띄는 진전을 이루었습니다. 그러나 이를 임의의 func에 적용하는 것은…

1주 전 · ai

[Paper] MagicQuillV2: 정밀하고 인터랙티브한 이미지 편집, 레이어형 시각 단서

우리는 MagicQuill V2를 제안한다. 이는 생성 이미지 편집에 레이어드 컴포지션 패러다임을 도입하는 새로운 시스템으로, 의미론적…

1주 전 · ai

[Paper] CAMEO: Correspondence-Attention 정렬을 위한 다중 뷰 확산 모델

Multi-view diffusion models는 최근 새로운 시점 합성을 위한 강력한 패러다임으로 부상했지만, 그들의 view-consistency를 가능하게 하는 근본 메커니즘은 아직 충분히 밝혀지지 않았다.

1주 전 · ai

[Paper] OneThinker: 이미지와 비디오를 위한 올인원 추론 모델

강화 학습(RL)은 최근 멀티모달 대형 언어 모델(MLLMs) 내에서 시각적 추론을 이끌어내는 데 눈에 띄는 성공을 거두었습니다. 그러나, exi...