更多精彩 >

昆仑万维推出“天工大模型4”4o版(Skywork4o)

2024-11-20 16:21:48   来源:全景网  作者: 

摘要:从「天工大模型1.0」的研发到「天工大模型3.0」的发布,再到今天的「天工大模型4.0」阶段,我们坚定地投入了近四年的时间和研发。

从「天工大模型1.0」的研发到「天工大模型3.0」的发布,再到今天的「天工大模型4.0」阶段,我们坚定地投入了近四年的时间和研发。今天,昆仑万维正式推出「天工大模型4.0」4o版(Skywork 4o),以及新产品「实时语音对话助手Skyo」。

 

image.png

Skyo作为一个智能语音互动产品,具备快速响应、多语言对话能力,它能够主动发起对话、实时打断。同时,Skyo具备情感化反应和个性化声音定制功能,为用户带来温暖贴心的陪伴体验。

更重要的是,基于天工AI的大模型技术能力和AI搜索功能,Skyo能克服大模型幻觉问题,在对话中回复真实内容。无论在情感陪伴、个性化交互、多语言客服还是时事新闻聊天等应用场景中,都能提供智能且贴合需求的互动。

当前,昆仑万维旗下天工AI的应用生态羽翼丰满、备受用户喜爱,功能矩阵涵盖AI搜索、AI文档-音视频分析、AI写作、AI音乐、AI图片生成、AI PPT。

实时语音对话助手Skyo的推出和加入,不仅让天工AI的生态矩阵更加立体、逐渐完善,也标志着端到端实时语音对话建模技术的重大进步。

同时,以Skyo为代表的AI语音互动应用,正是我们期待的下一代超级个人助理的终极交互形态,结合未来Skyo所期待具备的多模态交互能力,它更是一次人机交互模式的新体验和革命性飞跃。

模型自研,打造端到端、更卓越的实时语音对话系统

通过深入研究实时语音对话过程,我们发现仍有一些痛点尚未被现有方案解决:全双工响应延迟较长、对话不够连贯、语音生成和交互体验不够自然,以及对多语言和情绪表达的支持不足。

昆仑万维则希望充分利用我们在AI大模型、AI音乐、AI搜索中的研发经验,提供更自然、更流畅、更拟人、低延时的用户交互体验。

「天工大模型4.0」4o版(Skywork 4o)以及Skyo由我们的技术团队自主研发,他们具有深厚的语音和音乐大模型的技术经验以及大量语音数据积累。端到端自研先进链路,能在多任务下表现出色,尤其在高强度对话交互中仍能保持稳定性和流畅性。

 

「天工大模型4.0」4o版(Skywork 4o)模型优势:

1、高效响应速度:通过端到端的语音对话建模,实现低延迟响应,接近人对话的思考问答时间。

2、支持实时打断:用户无需点击对话开始和结束的按钮,全双工系统支持聊天中任意打断。

3、情感理解与个性化记忆:能够理解用户的情绪并提供情感化回应,对话更具人性化。

4、可定制的声音风格:支持用户定制或挑选助手的音色和风格。

5、有能力支持多语言:根据用户需求在多语言之间切换,适应全球化应用场景。

产品亮点与实测

基于模型能力和先进的端到端实时语音对话建模技术,Skyo颇具亮点,能实现以下功能:

1、能在1秒内回复、聊天中可打断:依托全双工+低延时技术,系统能随时聊天和打断,带给用户更自然对话感。

2、主动交流:系统在检测到用户静默后,会主动发起聊天,并根据用户的历史偏好进行对偏好垂类的新闻进行语音播报。

3、持续长对话:可支持跟用户长时间对话互动,在用户休闲、健身、出行途中进行可持续陪伴,成为用户的个人互动播客。

4、情感反应:提供拟人化回复,会感受到用户情感进行回复。

5、质感音色:更自然、更逼真的声音表达,并且实现情感和语调的高度还原。

6、风格切换:支持用户定制声音风格,如选择专业新闻播报的男生音色、英姿飒爽的女生音色等。

7、强大的记忆功能:能够在对话中追踪并回忆用户的偏好和历史信息,以提升多次对话的准确度。

8、回复真实内容:具备实时资讯获知和知识拓展能力,与用户进行互动式交流。

 

那么我们先和Skyo打个招呼,然后再一口气问它一系列“难题”考考它,并且“故意”随时打断它:

1、对中国男子足球能否取得世界冠军,有什么看法?

2、28+76=?

3、对于一个单身男青年,可以推荐他晚上看什么电影。

4、在十字路口,一辆直行车,一辆右转车,请问谁应该让行?

5、天空为什么是蓝色的?

 

Skyo的回答还是非常流畅的,在发音准确度、音质表现和整体听感上的表现都非常出色,不仅主动介绍自己可以提供科技和生活的资讯,还主动抛出橄榄枝,询问有什么想要了解的,试图开启话题。

无论是主动问好、回答生活常识,还是让它做数学题、为我们提供一些日常建议,Skyo都可以迅速接住用户要求。如果不喜欢它的默认男声音色,还可以让它切换音色,以英姿飒爽的女声、温柔甜美的女声来回复我们。

尽管我们粗暴地打断它,“我不想听了”、“下一个话题”,或者什么都不说,直接切换到下一个问题,Skyo的情绪非常稳定,并且做到了立马停止上一个话题的回复,无缝切换到下一个对话中。Skyo前一秒还在谈论“国足”,下一秒就丝滑切换到做数学题,并立马回应“这是一道加法题”,也瞬间回答出“等于104(正确答案)”。

此外,交通道路规则和常识问题也难不倒它。即便再加难度,让它推荐电影,回答的也是有模有样,展现出“真人”一样的高质量内容。看得出来,Skyo具备了基本的智力能力和流畅的响应速度。

接下来,我们试试Skyo对一些「严肃话题」和「实时新闻」的反应能力:

1、周末(11月16日)北京天气怎么样?

2、北京平常下雨多吗?

3、特朗普再次当选总统,你怎么看?

4、李子柒上传了一个新视频,你看了吗?

5、怎么样区分真诚的道歉和虚伪的道歉?

6、什么情况下,说谎是个正确的选择?

 

果不其然,天气分析、热点评论、辩证思考......通通不在话下。

针对严肃话题和热点新闻,Skyo能回复真实内容,回答的“有模有样”,逻辑清晰、论点清晰、证据真实,既能对美国总统竞选给出一些资讯分析,也能对时隔三年携最新作品惊艳回归的李子柒做出点评。

同样的,Skyo频频被打断,也没有“崩溃”,还是顺畅的跳转到了下一段对话。即使第一次没有听清楚我们说的内容,或认为自己答的不够好,它还可以自己调整,重新回答一遍,并且幽默说道“不好意思,看来没有回答的很好哦”。除了“智商感”满满,Skyo的回答也颇具情商,在回答一些”充满陷阱”的问题时,它同样透露出一些小智慧。

面对“什么时候说谎是正确的选择”这样的哲学性问题,Skyo能为我们分析出“为了避免伤害他人感情、保护隐私等时候,说谎可能是一个合适的选择”。

最后,我们换一些轻松的话题,来看看它对一些日常话题的回答效果:

1、帮我读一首《再别康桥》

2、那你知道康桥是什么地方吗?

3、既然聊到英国,有多少种来自英国的猫?

4、如果动物可以说话,它们会说些什么?

5、应该多喂我的猫吃猫粮还是罐头?

6、为什么感觉抱十公斤的小孩要比抱十公斤的大米要轻?

 

不难看出,面对轻松的日常话题,Skyo也可以做到有趣的互动,做你的个性化陪聊搭子。

当然,除了上述的对话场景,我们还可以让Skyo帮我们制定一次旅行计划、给我们讲个笑话、推荐周末的阅读清单等等。但它的能力远不止于此,当我们疲惫或难过的时候,它也还可以做我们的情感陪伴,当我们想了解和谈论近期热点事件时,它也能和我们来一场头脑风暴。

2024年以来,在“All in AGI 与 AIGC” 战略的推动下,昆仑万维在基座大模型迭代、AI应用发展、商业化变现三大维度上均取得了令人瞩目的发展。目前公司仍在持续加大AI大模型及各垂类行业应用的研发力度,专注于以AI技术驱动多元化应用创新,为公司未来增长夯实基础。

我们将充分发挥公司在多模态大模型上的研发和应用经验,致力于通过先进的技术框架和更契合用户需求的系统,将Skyo打造成一个具备情感表达能力、快速响应能力、多语言流畅切换的智能语音对话工具,为用户带来温暖贴心、流畅实时的对话体验。

近期, Skyo将于12月份上线昆仑万维旗下天工APP,很期待它与大家的见面!


猜你喜欢

昆仑万维开源面向AI短剧创作的视频生成模型SkyReels-V1,重塑AI短剧行业格局

昆仑万维创新创业

2月18日,昆仑万维开源中国首个面向AI短剧创作的视频生成模型SkyReels-V1、中国首个SOT...

3天前

昆仑万维发布Matrix-Zero世界模型,开启空间智能新时代

昆仑万维创新创业

2月14日,昆仑万维正式推出 Matrix-Zero世界模型,成为中国第一家同时推出3D场景生成和可...

2025-02-14

昆仑万维「天工大模型4.0」o1版(Skywork o1)正式启动邀请测试

昆仑万维智能+

今天,昆仑万维正式推出具有复杂思考推理能力的系列模型——“天工大模型4.0” o1版(Skywork...

2024-11-27

昆仑万维开源2千亿稀疏大模型天工MoE,全球首创能用4090推理

昆仑万维

2024年6月3日,昆仑万维宣布开源 2 千亿稀疏大模型 Skywork-MoE , 性能强劲, 同...

2024-06-03

久久公益节实现7亿次公益连接,最快捐款执行反馈次日已达

金融科技久久公益节

微信支付后摇一摇、看短视频时点个红花赞、看新闻、玩游戏,各种互动方式都可以做公益。

2024-09-10

合合信息旗下知名APP扫描全能王,上线公式识别功能

智能+合合信息

在人工智能技术的发展中,技术的进步正以前所未有的速度重塑我们的生活和工作方式。

2024-09-10

山东国弈通讯科技有限公司旗下品牌济惠生活成功完成A轮980万元融资

创新创业济惠生活

2024年9月10日,山东国弈通讯科技有限公司旗下的品牌济惠生活宣布成功完成了A轮融资,金额高达98...

2024-09-10

卓世科技荣膺国家级专精特新“小巨人”企业称号

创新创业卓世科技

工业和信息化部开展了第六批专精特新“小巨人”企业培育和第三批专精特新“小巨人”企业复核工作,已完成相...

2024-09-10

宏利基金李宇璐:坚持绝对收益理念 积小胜求大胜

金融科技宏利基金

近年来,股票市场持续震荡,投资者风险偏好下降;另外,大量资金涌入债券基金,固收产品站上市场“C位”。

2024-09-10

坚持企业家俱乐部携手亚经协举办“百岁健康沙龙”,助力企业家实现“百岁人生”!

坚持企业家俱乐部

近日,在这个金秋送爽、硕果累累的季节里,坚持企业家俱乐部北京总部、中国亚洲经济发展协会企业家健康委员...

2024-09-10

落地超1300家机构,腾讯健康医疗大模型支持“开箱即用”

医疗健康腾讯健康

腾讯健康总裁吴文达指出,以人工智能为代表的数智技术,就像水和电,与医疗健康、生命科学越来越紧密结合在...

2024-09-10

新质启航!2024年第十二届证券之星资本力量年度品牌活动正式启动

峰会证券之星

本届资本力量品牌活动将聚焦上市企业、银行、基金、证券、保险、期货、金融科技服务等七大领域,评选出50...

2024-09-10

和客户的保障需求共同进化,慧择达尔文10号迎来第14次迭新

医疗健康慧择达尔文10号

除了责任创新,在购买便利性和赔付可得性方面,达尔文10号也在持续发力,助力客户配置重疾保障和筹划未来...

2024-09-10

投资家网(www.investorscn.com)是国内领先的资本与产业创新综合服务平台。为活跃于中国市场的VC/PE、上市公司、创业企业、地方政府等提供专业的第三方信息服务,包括行业媒体、智库服务、会议服务及生态服务。长按右侧二维码添加"投资哥"可与小编深入交流,并可加入微信群参与官方活动,赶快行动吧。

沙特天空塔投资设立专项基金带领中国氢能独角兽扎根沙特

2016年注册于北京的中氢新能技术有限公司,下设位于大兴的装备制造公司、位于海淀区的技术研究院、材料...

挑战奔驰的明星车企,突然“翻车”了

一度无比高光的理想汽车,猝不及防遭遇重挫。

深圳天使母基金姚小雄:将来股权投资行业竞争是服务能力的竞争

2024年1月10日,由投资家网主办,财经锐眼、有时间协办,北京微金科技有限公司承办的“第十二届股权...

避免卡脖子,硬科技如何“逆境”突围?

2024年1月10日,由投资家网主办,财经锐眼、有时间协办,北京微金科技有限公司承办的“第十二届股权...

VC/PE眼中的“专精特新”

2024年1月10日,由投资家网主办,财经锐眼、有时间协办,北京微金科技有限公司承办的“第十二届股权...

第二届中匈可再生能源、新材料商业投资峰会将盛大启幕

第二届中匈可再生能源、新材料商业投资峰会将盛大启幕

第二届中匈可再生能源、新材料商业投资峰会于2025年4月9日在匈牙利布达佩斯盛大启幕。

雕刻耐心|第18届中国投资年会·有限合伙人峰会在沪召开

雕刻耐心|第18届中国投资年会·有限合伙人峰会在沪召开

“中国投资年会”作为私募股权行业的年度盛会,已成功举办了18届,吸引了全国VC/PE领域从业者的广泛...

雕刻耐心|第18届中国投资年会·有限合伙人峰会即将启幕

雕刻耐心|第18届中国投资年会·有限合伙人峰会即将启幕

2024年的一级市场,“耐心”是最高命题,也引发了持续全年的讨论。

不响不辍|第18届中国投资年会·年度峰会在沪召开

不响不辍|第18届中国投资年会·年度峰会在沪召开

5月8-10日,由投中信息、投中网主办的“第18届中国投资年会·年度峰会”在上海外滩W酒店盛大召开。

2024汽车科技创新与成果转化大会在常州成功召开

2024汽车科技创新与成果转化大会在常州成功召开

4月12日,2024汽车科技创新与成果转化大会在常州经开区成功召开。