Back office ops · Production

How Duolingo uses AI and human expertise across four stages to build personalized language learning courses

The problem

Creating accurate, engaging language course content at scale requires more than human expertise alone; Duolingo concluded that combining human curriculum knowledge with AI-driven efficiency was the best path to high-quality, individualized learning experiences.

Workflow diagram · grounded in source
1
Curriculum design by experts
trigger
“듀오링고에서는 경험 많은 커리큘럼 디자이너들이 각 과정마다 가르칠 내용과 시기를 주의 깊게 계획해요”
2
Raw content creation with AI translations
output
“레슨 속 모든 문장들의 모든 가능한 번역문을 인공지능이 써내는 거예요. 특정 문장이 여러 방식으로 번역될 수 있는 경우, 학습자가 쓴 답을 올바로 처리할 수 있게 되죠”
3
Automated exercise generation
ai_action
“대부분은 컴퓨터 알고리즘을 사용해 자동적으로 생성돼요”
4
Human-created comprehension exercises
human_review
“특정 연습문제 유형들은 인공지능 툴만 사용해선 정확도를 높이기가 어려워서 이것을 전문가가 담당하죠. 학습자가 단락을 읽거나 들은 후 그에 관련한 질문에 대답을 해야 하는 연습문제의 경우, 듀오링고의 콘텐츠 개발팀이 이 질문들을 직접 만들어요”
5
AI pronunciation evaluation and audio generation
ai_action
“학습자가 주어진 문장을 소리 내 읽어야 하는 연습문제에서 인공지능 툴을 사용해 올바르게 읽었는지를 결정해요. 또한, 연습문제에 필요한 오디오를 생성해요. 최근에 듀오링고의 여러 과정에서 듀오링고 캐릭터의 목소리를 사용해 오디오를 생성하기 시작했어요”
6
Personalized exercise selection via Birdbrain
ai_action
“듀오링고의 버드브레인 모델을 사용해 학습자의 학습 레벨에 가장 적합한 연습문제들을 골라요”
7
Spaced repetition scheduling
feedback_loop
“이전에 학습한 단어를 언제 또 연습하면 좋을지 결정하는 인공지능 모델도 있어요. 그에 따라 단어 복습을 위한 연습문제를 다른 레슨에 추가하죠”
Reported outcome

The four-stage human-AI pipeline delivers personalized Duolingo lessons that teach carefully sequenced concepts through varied content and adapt exercise selection and timing to each learner's individual needs, with the content team working faster, more accurately, and more efficiently.

Reported metrics
Content team speed and accuracy더 신속하게, 더 정확하게, 더 효율적으로
Reported stack
버드브레인 모델
Source
https://blog.duolingo.com/ko/how-duolingo-uses-ai/
Read source ↗

Frequently asked questions

What did this team achieve with this AI workflow?

The four-stage human-AI pipeline delivers personalized Duolingo lessons that teach carefully sequenced concepts through varied content and adapt exercise selection and timing to each learner's individual needs, with t…

What tools did this team use?

버드브레인 모델.

What results were reported?

Content team speed and accuracy: 더 신속하게, 더 정확하게, 더 효율적으로 (source-reported, not independently verified).

How is this back office ops AI workflow structured?

Curriculum design by experts → Raw content creation with AI translations → Automated exercise generation → Human-created comprehension exercises → AI pronunciation evaluation and audio generation → Personalized exercise selection via Birdbrain → Spaced repetition scheduling.