ArXiv AC/DC：모델과 태스크 공진화를 통한 전문화 LLM 자동 발견

저자 Andrew Dai, Boris Meinardus, Ciaran Regan, Yingtao Tian, Yujin Tang이 새로운 프레임워크 AC/DC（전체 명칭: “태스크 능력 공진화를 통한 새로운 LLM 전문가 발견”）를 발표했습니다. 이 논문은 ICLR 2026 컨퍼런스에 채택되었으며, 독립적인 훈련 라운드를 완전히 포기하는 LLM 개발의 새로운 방식을 대표합니다.

해결하는 문제

전통적으로 팀이 LLM의 능력을 확장하고 싶을 때 각 새 도메인에 대해 별도의 훈련 라운드를 실행해야 했습니다. 의료 전문가가 필요합니까? 별도 실행. 법률 모델? 하나 더. 금융? 세 번째. 각각 하이퍼파라미터, 데이터, 평가, 회귀 테스트가 필요합니다.

AC/DC는 그 수동 개입 집합을 제거합니다. 저자들은 **“개방성——모델과 태스크의 공진화를 통해——이 단일 실행에서 계속해서 새로운 능력을 가진 모델을 발견할 수 있다”**고 주장합니다.

프레임워크 작동 방식

AC/DC는 두 가지 구성 요소를 동시에 진화시킵니다:

모델——모델 병합 기술을 통해. 단일 모델을 처음부터 훈련하는 대신 여러 기존 모델이 (다양한 가중치 조합을 통해) 병합되고 결과 집단이 테스트됩니다.

태스크——합성 데이터 생성을 통해. 각 태스크 자체도 진화합니다——새로운, 더 복잡한, 더 미묘한 이전 태스크의 변형이 생성되고, 전체 태스크 집단이 모델을 새로운 틈새로 밀어 넣습니다.

핵심은 두 프로세스가 연결되어 있다는 점입니다. 모델은 합성 태스크에서 경쟁합니다. 태스크는 일부 모델이 다른 것이 실패하는 곳에서 성공하도록 자체 적응합니다. 그리고 끊임없이——수동 개입 없이.

결과

저자들은 몇 가지 중요한 발견을 보고합니다:

• 발견된 집단은 수동으로 선별된 모델보다 더 광범위한 전문 지식 커버리지 시연
• 모델이 더 적은 GPU 메모리로 더 큰 동류 모델 능가
• 태스크 설계와 모델 능력 모두에서 지속적인 혁신 시연
• 멀티 에이전트 최선-N 선택 시나리오에서 향상된 성능

결과에서 없는 것에 주목하는 것이 중요합니다——구체적인 벤치마크에서의 지배에 관한 주장은 없습니다. 저자들은 명시적으로 SOTA를 목표로 하지 않습니다. 대신 AC/DC 모델 집단이 더 풍부한 기능적 다양성을 갖는다는 것을 보여줍니다.

새로운 개발 패러다임

저자들은 AC/DC를 **“LLM 개발의 심오하게 새로운 패러다임”**으로 위치 지정합니다. 다음 사이클 대신:

1. 사용 사례 식별
2. 데이터 선별
3. 훈련 실행
4. 평가
5. 반복

다음이 됩니다:

1. 프레임워크 실행
2. 스스로 틈새를 발견하게 하기

이것은 대담한 위치 지정입니다. 개방성은 낭만적으로 들리지만 프로덕션 팀은 보통 예측 가능성이 필요합니다.

ICLR 2026 배경

AC/DC는 ICLR 2026의 같은 연구 방향에서 나온 2026년 여러 논문 중 하나입니다——진화를 통한 AI 능력 자동 발견에 관한 연구. 관련 연구 라인은 진화 계산의 초기 “Novelty Search” 접근법과 연결되어 AI에 적용되었습니다.

저자들은 구체적인 회사나 기업 배포를 언급하지 않습니다——이것이 주로 사전 프로덕션 단계의 연구 작업이라는 신호입니다. 그럼에도 프레임워크는 매력적입니다——AI 시스템이 가능한 전문 지식의 공간을 스스로 탐색하는 길을 열기 때문입니다——엔지니어가 무엇을 원하는지 미리 정의할 필요 없이.

AI 개발의 장기 트렌드를 추적하는 사람들에게 AC/DC는 중요한 데이터 포인트입니다. 현재 프로덕션 시스템에는——직접 적용 가능성은 거의 없지만, 향후 몇 년 동안 이 분야가 나아갈 수 있는 방향을 대표합니다.