好文集ChatGPT Plus¥119

别再续费英语口语APP!宝爸手搓少儿口语陪练|免费开源可自改

文章目录

部分视频或图片暂未收录,已在正文保留提示;需要时可查看原文。查看原文 ↗

孩子不是学不会英语,是学会了根本没地方用。所以我给一只小熊接上语音模型,带孩子一起准备一场“野餐”,这个英语学习的小项目我直接开源了。链接在后面 ,实操视频也在后面哦👇

谁能用?能拿来干嘛?

  • 家里有幼儿园、小学英语启蒙娃:点开就能玩,不用背单词表、没有考试。孩子一边帮小熊筹备野餐,一边自然而然开口说英语。

  • 做语音应用的开发者、老师:源码随便拿去改,换主题、换词汇、改关卡都行。一套「语音输入→理解→语音输出」的最小闭环,现成可以参考。

开口小岛:帮小熊准备野餐

这是我用蚂蚁百灵 Ming-3.0 语音系列模型做的产品 —— 开口小岛,第一关就是「帮小熊准备野餐」。每一次只交给孩子一件简单的小事:

  • 🍎 装水果,说 Apple

  • 🔵 找杯子,认 Blue

  • 🧺 想要苹果,开口说 An apple, please.

小熊会侧耳倾听、挥手互动,完成之后还给孩子庆祝。主体英文,搭配少量中文,第一版内置 6 种水果 + 6 种颜色。

技术架构:三个模型在线 API 接力

  • Ming-3.0-tts:生成示范句和鼓励语音

  • Ming-3.0-asr-tiny:把孩子的语音转成文字

  • Ming-3.0-audio-flash:直接理解音频,结合任务规则给出反馈

一个有意思的实测细节

我说:A pear, please.

ASR 识别转写成了:A pair, please.

单看文字转写,这算是识别出错,但小熊直接判定:过关✅

它凭什么?

案例详解:为什么 pear 和 pair 都算对?

回到刚才梨的测试,这是联调真实记录,输入还是 Ming 合成语音,还不是小朋友的录音:

语音:A pear, please.

转写结果:A pair, please.

最终判定:表达完成 ✅

这次测试,Ming-3.0 表现很出彩。 pear 和 pair 同音,如果硬比对转写文本,孩子就会被判错。

audio-flash 没有死抠文字,而是结合音频和 “帮小熊拿梨” 的场景,读懂孩子本意。

asr-tiny 负责听清文字,

audio-flash 负责听懂人。

就像线下有经验的老师,不会因为同音词轻易否定孩子。

产品思考与愿景

做到这一步,模型早已不止是转写工具,更像能陪孩子对话的伙伴。看到这我就在想:不少高价少儿口语 APP,普通人也能自己复刻了,不必再高价入手,真的要感谢蚂蚁百灵模型强悍的能力!

做口语产品我越发认同:文字只是线索,场景才是裁判。第一版我没做发音打分,只判断孩子是否完成表达,后续还会用真实儿童语音持续优化。

不想再加一场考试给孩子压力。只想给孩子一个小任务,让刚学会的英语立刻能用起来。 作为家长,我的心愿很简单:英语不该是死记硬背的考点,而是孩子表达、交友、看世界的工具。

英语学习的小项目开源地址GitHub: https://github.com/modengsir/speaking-island

在线网站浏览 https://picnic-speaking-island.modengsir.chatgpt.site/

媒体暂未收录,可在原文中查看

我是 @ModengSir , 一个AI研究者,开发者,AIGC创作者,欢迎一起沟通交流!

🤖 超级个体视角|AI 落地与变现实战分享 🛠 AIGC视频 · AI副业实操 · AI工具评测 ⚡ 借助 AI 杠杆,打造有真实质感的个人 IP 💌 KOLs&商单资源合作: e-mail : modengsir@gmail.com

全文完
查看原文