Walden Yan은 Cognition의 머지된 PR이 1년 동안 40배, 엔지니어 수는 2.7배가 됐다고 소개했습니다 | DAKER 커뮤니티

AI Engineer 채널의 「40x More Merged PRs With 2.7x the Engineers — Walden Yan, Cognition」에서, Cognition 공동 창업자이자 최고제품책임자 Walden Yan은 최근 약 1년 동안 머지된 풀 리퀘스트가 40배가 됐고 같은 기간 엔지니어 수는 2.7배가 됐다고 소개했습니다. 이 숫자는 발표자가 자사 내부 차트로 보여 준 집계입니다. 그는 엔지니어 한 사람의 생산성이 10배 이상이 됐고, 풀 리퀘스트의 질도 같거나 더 좋아졌다고 덧붙였습니다. 공식 발표 정리문은 풀 리퀘스트 건수가 생산성 전부는 아니며, 질이 유지됐거나 나아졌다는 말은 회사의 평가라고 분명히 적습니다. 오늘 할 일은 그 배율을 그대로 쫓는 일이 아닙니다. 에이전트에게 티켓 하나를 넘기기 전에, 한 시간 안에 처음부터 다시 만들 수 있는 테스트 환경이 있는지, 그리고 에이전트가 계속 들여다볼 측정값과 보고 주기가 있는 직무를 하나 정해 두는 것입니다.
이 영상이 다루고 있는 것
이 발표는 2026년 11월 12일 AI Engineer CODE 2026 이틀째 본무대에서 이뤄졌고, 공식 발표 정리문의 제목은 「A New Age of Software Engineering」입니다. AI Engineer 채널의 단독 영상은 한국 시간 2026년 11월 18일 오후 11시 0분에 올라갔습니다. 단독 영상의 길이는 14분 7초입니다. 이 글을 쓰기 직전인 2026년 11월 19일 오전 10시 32분경, 맥미니에서 확인한 조회수는 19,577회였습니다. 공식 발표 페이지는 이 세션을 2일차 라이브 스트림의 2시간 33분 30초부터 2시간 47분 7초 구간으로도 적고, 기계 작성 전사본에 인식 오류가 남을 수 있다고 밝힙니다. 이 글은 2026년 11월 19일에 그 공식 페이지와 정리문, 전사본을 다시 확인했습니다. 아래의 수치와 사례는 발표자가 자사 경험을 말한 내용이며, 이 글이 별도의 생산성 조사로 재확인한 결과는 아닙니다.
발표자가 꺼내 놓은 질문은, 에이전트가 코드를 짤 수 있느냐가 아니었습니다. 그렇게 늘어난 작업을 조직이 받아내려면, 코드베이스와 팀 구조를 어떻게 바꿔야 하느냐는 쪽이었습니다. 공식 정리문은 그 아래의 운영 방식이 차트보다 중요하다고 봅니다. 사람이 모든 수정을 감독하는 대신, 감독이 필요한 예외만 다루는 쪽을 기본값으로 만들려는 시도라는 것입니다.
작은 팀이 고객 문제를 처음부터 끝까지 맡습니다
발표자가 그리는 도착점은, 버그가 들어오면 에이전트가 조사하고 수정을 만들고 검증한 뒤 그 결과가 운영 환경까지 이어지는 흐름입니다. 사람이 개입할 여지는 남지만, 그 개입은 판단이 필요할 때여야 하고, 에이전트의 지시가 바닥나서가 아니어야 한다고 했습니다. 전사본에 따르면, 버그 보고부터 머지와 이후 관찰까지 사람 손 없이 끝나는 풀 리퀘스트도 있다고 했습니다. 다만 판단이 필요한 경우는 자주 있으며, 그때는 사람에게 넘긴다고 했습니다.
2026년 3월께 공학팀과 나눈 대화를 그는 이렇게 전했습니다. 티켓 보드의 일감을 에이전트에게 넘겨 구현만 맡기는 방식으로는 성공하기 어렵다는 것이었습니다. 그래서 큰 팀을 더 작은 단위로 나눴다고 했습니다. 한 단위는 엔지니어 두세 명이며, 에이전트 여러 개가 구현 용량을 보태 줍니다. 그 단위는 고객 버그 제보를 듣고, 품질 확인을 하고, 제품 관리까지 맡는 세로 방향의 책임을 집니다. 공식 정리문의 표현을 빌리면, 에이전트는 그 그룹의 구현 용량을 늘릴 뿐, 고객을 이해하는 일 자체를 대신해 주지는 않습니다.
슬랙에서 버그 영상과 수정 영상을 주고받습니다
구체적인 예는 슬랙에서 시작됩니다. 고객이 버그를 담은 영상을 보내면, 엔지니어는 그 맥락을 Devin에 넘깁니다. 에이전트는 수정을 만들고, 고친 동작을 보여 주는 영상을 다시 보냅니다. 발표자는 통합 개발 환경을 열지 않고도 고객에게 답할 수 있다고 했습니다. 공식 정리문은 이 영상이 양쪽에서 쓰인다고 적습니다. 처음 영상은 실패를 눈으로 보게 하고, 두 번째 영상은 요청한 동작이 달라졌는지를 짧게 확인할 수단이 됩니다. 손타자가 빨라져서가 아니라, 인수인계 구간에 증거가 따라가서 일이 짧아진다는 설명입니다.
같은 맥락에서 발표자는, 대부분의 일을 슬랙 밖으로 나가지 않고 처리한다고 했습니다. 개발을 증거와 영상 중심으로 바꿨다는 말입니다. 이는 Cognition 내부의 작업 방식이고, 모든 팀이 슬랙을 써야 한다는 보편 규칙은 아닙니다.
새 환경을 띄우는 일이 사람에게 묻는 일보다 싸야 합니다
이 단순함은 아래쪽의 기반 작업에 기대고 있습니다. 발표자에 따르면 Cognition은 서비스를 Docker Compose로 모으고, 외부 의존성은 모의 구현으로 바꿔, 에이전트가 가상머신 하나에서 응용 프로그램을 시험할 수 있게 했습니다. 실제로 돌아가는 여러 외부 서비스를 그대로 붙이면, 같은 환경을 다시 만들기 어려웠다고 했습니다. 이제 회사의 코딩 에이전트는 변경을 확인할 때 실제 외부 서비스를 건드리지 않는다고 했습니다.
이 가상머신은 한 시간마다 다시 만든다고 했습니다. 최신 저장소를 받아 코드베이스를 처음부터 다시 빌드하고, 빌드가 실패하면 에이전트가 먼저 대응한다고 했습니다. 성공한 스냅샷은 이후 실행의 출발점이 됩니다. 공식 정리문은, 긴 준비 절차의 실패가 사람 주의를 소모하지 않게 하려는 설계라고 적습니다. 시험 방법도 산출물로 남깁니다. 발표자는 Devin이 코드베이스를 시험하는 기술을 스스로 적고, 응용 프로그램이 바뀌면 그 기술도 고친다고 했습니다. 가상머신만 새로워서는 부족하고, 시험 설명이 한 달 전 화면을 가리키면 안 된다는 뜻입니다.
발표자는 더 복잡한 상호작용도 같은 가상머신 안에서 시험하려 했다고 했습니다. 공식 정리문은 여러 계정이 화상 회의처럼 한자리에 참여하는 경우를 예로 듭니다. 모든 응용 프로그램이 단순한 단위 시험 루프에 들어간다고 선언하는 것이 아니라, 중요한 동작을 에이전트가 확인할 수 있게 만들려는 목표입니다. 전사본에 따르면, 이미 몇몇 엔지니어는 개발 과정을 아이패드로 옮겼다고 했습니다. 공식 정리문은 이 대목을, 운영 상태가 개인의 노트북이 아니라 클라우드에서 도는 실행 쪽에 있다는 표시로 읽습니다.
실행 기록으로 작업 방식 자체를 고칩니다
실행이 공유된 환경에서 이뤄지면, 기록이 남습니다. 발표자는 에이전트가 시간과 토큰을 어디에 쓰는지 살펴, 반복되는 일을 스크립트나 더 나은 시험으로 바꾼다고 했습니다. 전사본에 따르면 Devin은 매일 슬랙 채널에 작업 방식을 고치자는 아이디어를 올린다고 했습니다. 예시로 든 문장은, 노드 설정을 바꾸면 지속적 통합에서 1분을 줄일 수 있다거나, 린트 스크립트를 바꾸면 인공지능 코드 검토 전에 버그를 더 잡을 수 있다는 제안입니다. 이는 에이전트가 올린 제안의 사례로 소개된 것이며, 이 글이 그 효과를 따로 측정한 결과는 아닙니다.
공식 정리문은 이를 두 개의 피드백 고리로 봅니다. 하나는 고객 문제를 고치는 고리입니다. 다른 하나는, 그 종류의 문제를 고치는 데 왜 그렇게 많은 단계가 필요했는지를 묻는 고리입니다. 둘째 고리가 없으면, 같은 비싼 조사를 수백 번 반복하면서도 그 활동을 진전으로 착각할 수 있다고 적습니다.
다음 전환은 한 번 끝나는 과제에서, 계속 측정하는 직무로 옮기는 일입니다. 발표자는 지연 시간을 한 번 줄이라는 부탁 대신, p99 지연 시간을 개선하는 책임을 에이전트에게 줄 수 있다고 했습니다. 그 직무는 계측과 기준선에서 시작해, 알림과 조사, 수정 후보, 진행 보고로 이어집니다. 「더 빠르게」만으로는 오래 쓸 신호가 되지 않습니다. 측정된 목표와 재현 방법, 합의된 보고 주기가 있어야 첫 패치 이후에도 에이전트가 상태를 계속 볼 수 있습니다. 비슷한 예로 그는 요소의 경계 상자 변화로 보는 레이아웃 이동, 클릭 지연 시간, 온보딩 유지율도 들었습니다. 코드 변경이 결과에 바로 드러나는 정도는 서로 다르지만, 원하는 결과가 보여야 한다는 점은 같습니다.
더 오래 가는 추론 최적화 작업도 언급했습니다. 전용 하드웨어를 쓰고, 최종 변경은 사람이 승인한다고 했습니다. 공식 정리문은 이 대목을, 자율성이 검토를 없앤다는 주장이 아니라, 사람이 실험을 매번 일정에 넣지 않아도 탐색이 이어질 수 있다는 주장으로 적습니다. 전사본에 나온 특정 하드웨어 제품명은 인식이 불분명해 이 글에는 적지 않습니다.
첫 버전이 나온 뒤에도 맞춰 둡니다
마지막 예는 안드로이드 응용 프로그램입니다. 발표자에 따르면 당시 Cognition은 iOS 작업은 꽤 진행돼 있었지만, 안드로이드에 쓸 여력은 적었습니다. 안드로이드 이식을 한 줄의 지시로 다루지 않고, 에이전트에게 지속적인 유지 직무를 줬다고 했습니다. 저장소 변경을 지켜보고, 사용자 의견을 모으며, iOS 동작과 비교하고, 실제 품질 확인을 하며 구현을 맞춰 두라는 직무입니다. 전사본에서는 iOS 응용 프로그램을 청사진으로 삼아, 처음부터 끝까지 동등성을 유지하라고 지시했다고 나옵니다.
발표자는 44일 만에 동작하는 응용 프로그램이 나왔고, 곧 내보낼 예정이라고 했습니다. 그 기간의 어떤 날에는 하루 풀 리퀘스트가 40건, 50건 가까이 머지되기도 했다고 전했습니다. iOS 응용 프로그램과 픽셀 단위로 비교하는 실제 품질 확인을 하고, 중요한 결정만 사람에게 넘긴다고 했습니다. 공식 정리문은 이 결과를 아직 출시된 제품이 아니라, 앞으로 공개될 작업으로 적습니다. 이 글도 그 한계를 그대로 둡니다. 발표자는 엔지니어가 대부분의 경우 에이전트 화면을 직접 열지 않고, 슬랙으로 돌아온 녹화만 본다고 했습니다.
오늘 할 일, 그리고 이어서 생각할 점
참가자가 오늘 가져갈 실험은, 머지 건수를 한 번에 40배로 늘리는 목표가 아니어도 됩니다. 지금 쓰는 서비스 가운데 에이전트가 혼자 시험하기 어려운 것을 하나 고르십시오. 외부 의존성을 모의 구현으로 바꿀 수 있는지, 깨끗한 환경에서 한 시간 주기로 다시 빌드할 수 있는지부터 적어 보십시오. 빌드가 깨졌을 때 사람이 맨 먼저 나서야 하는지, 에이전트가 먼저 손댈 수 있는지도 함께 보십시오.
그다음에 티켓 하나가 아니라, 측정 가능한 직무 하나를 정해 보십시오. 기준선, 재현 방법, 알림, 보고 주기를 적고, 에이전트가 그 숫자를 계속 볼 수 있게 하십시오. 고객이 보낸 실패 영상처럼, 인수인계 구간에 증거가 따라가게 하는 일도 작지만 바로 시도할 수 있습니다. 발표자가 반복한 점은 분명합니다. 에이전트는 구현 용량을 늘릴 수 있지만, 고객 문제의 책임과 판단은 작은 팀이 쥐고 있어야 합니다.
출처
영상 제목은 「40x More Merged PRs With 2.7x the Engineers — Walden Yan, Cognition」이고, 채널은 AI Engineer입니다. 발표자는 Cognition 공동 창업자이자 최고제품책임자 Walden Yan입니다. 발표일은 2026년 11월 12일, AI Engineer CODE 2026 이틀째 본무대입니다. 단독 영상 게시 시각은 한국 시간 2026년 11월 18일 오후 11시 0분, 길이는 14분 7초입니다. 공식 발표 정리문의 제목은 「A New Age of Software Engineering」이며, 이 글의 사실과 인용은 2026년 11월 19일에 확인한 그 정리문과 기계 작성 전사본을 대조한 결과입니다. 머지된 풀 리퀘스트 40배와 엔지니어 수 2.7배는 발표자가 보여 준 내부 차트입니다.