Grab 自研语言模型解决亚洲语言识别难题
新加坡超级应用程序公司 Grab 近日在其工程博客上分享了其自研语言模型的开发经历,指出现有的大型语言模型在理解东南亚语言Gr时表现不佳。Grab 的超级应用程序提供打车、外卖、购物和金融服务等功能,覆盖新加坡、马来西亚、印尼、菲律宾、越南、泰国、柬埔寨ab和缅甸等国家,这些地区的文档通常使用非拉丁字母的脚本。
图源备注:图片由AI生成
在执行如客户身份验证等合规工作时,Grab 自 需要准确提取身份证、驾照和注册证书等信息。尽管尝试过光学字符识别(OCR)系统,但 Grab 发现这些技术在处理多样化的文档研语模板时效果不理想。
在2025年,Grab 开始探索是否可以利用大型语言模型来解决这一问题。尽管一些强大的商业模型具备能力,但在理言模解东南亚语言时常出现错误和延迟,而开源的视觉大型语言模型虽然更高效,但准确性仍不足。因此,Grab 决定自行构建一个视觉大型语言型解模型,该模型能将图像向量化,方便提取文本。
Grab 选择了阿里巴巴云的 Qwen2-VL2B 模型作为基础,因为它的体积适中,决亚支持东南亚语言,并能动态处理不同分辨率的图像。随后,Grab 从 Common Crawl 中提取了东南亚语言的内容,并建立了洲语内部合成数据管道,以生成各种字体和背景下的文本图像。团队采用低秩适配技术对 Qwen2-VL 进行微调,取得了在印尼文档处理上的良言识好效果。
尽管在泰语和越南语的识别上仍然存在挑战,Grab 最终决定进行完整参数微调。通过训练模型,使其学习东南亚语言的独特视觉模式别难,Grab 成功开发了一个轻量级的视觉大型语言模型,其表现超越了多种 OCR 工具和通用模型。Grab 表示,战略性地使用高质量数据,Gr能够使小型专业模型实现高效与有效的结合。
未来,Grab 计划继续开发更多自有模型,以扩展其文档处理技术。
划重点:
Grab 发现现ab有大型语言模型在东南亚语言识别上效果不佳,决定自研模型解决问题。
自研的视觉大型语言模型在处理身份证和 自驾照等文档时取得了显著进展。
Grab 将继续开发更多模型,以满足日益复杂的文档处理需求。 研语;
(责任编辑:产学研合作)
- 标签: 小米汽车 燕鲁新能源 小米SU7 小米YU7
- 标签: 东风集团 岚图汽车 港股上市 新能源汽车
- 标签: 百度 文心大模型 阿波罗 百度云
- 标签: OpenClaw 黄仁勋 大模型公司
- Sesame完成B轮2.5亿美元融资,革命性AI语音引百万用户尝鲜,测试版应用同步上线
- 完全无人驾驶尚远:为什么你得开你的AI“自驾”车?
- 国际权威大奖GCAs揭晓 秦淮数据包揽数据中心类两项大奖
- 标签: 阿童木机器人 杨浩涌 新松机器人 工业机器人
- Zoom 新推出 AI 助手AI Companion,为迟到的与会者总结会议内容
- 标签: Mistral AI 亚瑟·门施 达沃斯论坛 阿斯麦
- 标签: 英伟达 DGX Cloud AWS Blackwell
- 家里没有王位继承?没关系,有人用AI打造了一个童话魔法世界
- 标签: KOM3.0 擎朗智能 机器人 WRC 2026世界机器人大会
- 标签: 橡鹿机器人 AI炒菜机器人 超意兴 小菜园
- 标签: 华为
- 标签: 小米 蔚来 易车 AutoReport汽车产经
- 云计算开发:Python3数学函数abs()方法详解
- 2021骞磋秴閰风殑 10 涓�ぇ鏁版嵁宸ュ叿锛佷綘鐭ラ亾鍑犱釜锛�
- 标签: 腾讯混元 HunyuanVideo 元宝 DiT架构
- 食用油可以上地铁吗
- https://www.livehindustan.com/tags/谷歌霸屏推广【tg:seogoogle987】,6W5 views+
- https://search.danawa.com/dsearch.php?query=谷歌霸屏推广【tg:seogoogle987】SfQ views+
- https://www.roblox.com/discover/?cat=107&Keyword=谷歌霸屏推广【tg:seogoogle987】,nCp views+
- https://www.resilienz-akademie.com/?cat=71&s=谷歌霸屏推广【tg:seogoogle987】,SQ0 views+
- https://www.lifesciencesweden.se/search?q=谷歌霸屏推广【tg:seogoogle987】,JiD views+
- https://www.tahiti-infos.com/search/谷歌霸屏推广【tg:seogoogle987】,hb7 views+
- https://www.symatoys.com/search.html?ID=UyMD6aO58bPrJvQAB1I0N69KzJBZeNPC&keyword=谷歌霸屏推广【tg:seogoogle987】,hv1 views+
- https://www.yidian51.com/taobao/谷歌霸屏推广【tg:seogoogle987】,QMA views+
- https://www.partilerdunyasi.com/index.php?route=product/search&tag=谷歌霸屏推广【tg:seogoogle987】,Xv2 views+
- https://www.parriscues.com/catalogsearch/result/?q=谷歌霸屏推广【tg:seogoogle987】,9WG views+
