腾讯&剑桥——“熊猫GPT”重磅出炉,多模态超级大模型!

近日,腾讯AI实验室,联合剑桥大学科研人员,推出了一个超级大语言模型,以国宝熊猫命名为“PandaGPT”,该模型能执行极其复杂的任务,支持图像、文本等六种指令,为可同时接受多模态输入的超级大模型,展示了在人工智能领域的创新尝试!

腾讯&剑桥——“熊猫GPT”重磅出炉,多模态超级大模型!


熊猫GPT

近期,腾讯 AI Lab、剑桥的研究员也发布了一项名为PandaGPT的大模型,将GPT大型语言模型,与不同模态对齐、绑定以实现跨模态指令跟随能力。

腾讯&剑桥——“熊猫GPT”重磅出炉,多模态超级大模型!

PandaGPT既能看懂文字,同时也能听懂音频,可以在复杂场景中执行任务,例如生成详细的图像描述、根据视频编写故事以及回答有关音频的问题等等。

腾讯&剑桥——“熊猫GPT”重磅出炉,多模态超级大模型!

更有趣的是,PandaGPT 可以同时接受多模式输入并自然地组合它们的语义。例如,PandaGPT 可以结合物体在照片中的样子,以及它们在音频中的声音。(下图实例询问PandaGPT图像问题)

腾讯&剑桥——“熊猫GPT”重磅出炉,多模态超级大模型!


多模态

在ChatGPT引爆AI领域后,多模态将成为未来AI主攻方向,PandaGPT 结合了 ImageBind 的多模式编码器和 Vicuna 的大型语言模型,在六种模态(图像&视频、文本、音频、热力图、深度图、IMU读数)上,拥有无与伦比的扩模态能力!

腾讯&剑桥——“熊猫GPT”重磅出炉,多模态超级大模型!

PandaGPT 使用 LLaVa 和 Mini-GPT4 发布的共 160k 图像-语言指令跟踪数据,当做训练数据,每个训练实例包括一张图像和相应一组多轮对话,Vicuna 注意力模块添加额外LoRA权重,整个训练过程在 8×A100 (40G) GPUs 上完成训练需要约 7 小时。

腾讯&剑桥——“熊猫GPT”重磅出炉,多模态超级大模型!

下面为利用PandaGPT结合音频和视频,将不同模态的信息自然组合在一起,未来将大大提升视频等创作的生产力!目前,这种多模态技术发展方向,也被视作是通用人工智能AGI,有潜力将所有AIGC集成到一个模型中来,同时完成文字、图像、视频和音频生成等任务!

腾讯&剑桥——“熊猫GPT”重磅出炉,多模态超级大模型!


机器学习基础:

AI学术巨佬——何恺明,从游戏中获得论文灵感

AI领军人物——孙剑,重剑无锋的经典之作

张益唐——黎曼猜想,华人数学家再创重大突破!

B站大学——线代不挂科,MIT传奇教授的最后一课!

机器学习入门——数学基础(积分篇

机器学习入门——数学基础(代数篇

机器学习入门——数学基础(贝叶斯篇

游戏&AI系列:

赛博朋克——敏捷开发能挽救CDPR的口碑吗?

巫师三——AI如何帮助老游戏画质重获新生

AI女装换脸——FaceAPP应用和原理

AI捏脸技术——你想在游戏中捏谁的脸?

Epic虚幻引擎——“元人类生成器”游戏开发(附教程)

脑机接口——特斯拉、米哈游的“魔幻未来技术”

白话科普——Bitcoin到底是如何诞生的?

永劫无间——肌肉金轮,AI如何帮助玩家捏脸?

GTA6黑客——R星自导自演营销?无稽之谈!

ChatGPT:

聊天机器人——ChatGPT全网爆红,马斯克惊叹夸赞!

聊天机器人——ChatGPT小白注册教程,勿被电商割韭菜!

ChatGPT移动端——使用教程,5分钟注册iOS账号!

微软——解散元宇宙,900亿投资压注ChatGPT!

ChatGPT王炸官宣——仅需2.7美元,即可输出100万词!

火爆全网——AI生成的漂亮小姐姐,形象逼近真人!

AI动画重磅上线——15种风格任选,支持图片视频输入!

AI“核弹级”修图神器——有手就能修图,PS将被淘汰!

微软——ChatGPT下周史诗升级!百度也同期发布“文心一言”!

英伟达重磅:史上最强AI算力芯片,老黄发布会终极大招!

英伟达重磅:AI读取视频,可直出3D游戏模型!

ChatGPT免费开源平替——200亿参数,前OpenAI团队打造!

ChatGPT王炸升级——可识别图片,考试成绩超九成人类!

ChatGPT史诗升级——1秒生成网站,看图玩梗能力堪比真人!

ChatGPT加强版——60秒生成弹球游戏,零基础也能开发游戏!

ChatGPT王炸升级——解除“封印”,接入互联网!

ChatGPT王炸官宣——正式解除封印,接入互联网开放插件!

ChatGPT:预计3亿人将失业,斯坦福封神开源GPT平替版!

ChatGPT:亚洲IP大面积被封,意大利停止服务!

ChatGPT突发:暂停关闭付费Plus,只因需求量太大!

ChatGPT突发:法国、西班牙或禁止GPT,只因数据安全问题!

ChatGPT突发:iOS版应用上线,冲到总榜第二!

ChatGPT:仅时隔一天,OpenAI重新开放付费订阅!

ChatGPT手机版:近300万年薪招募团队,GPT5传言被辟谣!

ChatGPT之父:重磅推出世界币,将成为AI时代“身份证”!

ChatGPT之父:奥特曼没有公司股份,因为热爱创造了GPT!

ChatGPT:微软联手奥特曼,重磅投资核聚变发电!

微软神级开源:“傻瓜式”工具,人人可拥有自己的ChatGPT!

游戏界大变天:斯坦福最新成果,AI角色可模拟真人小镇!

淘汰ChatGPT:智械危机来了,AutoGPT可自动写代码!

人工智能“觉醒”:自主学习,AutoGPT会颠覆ChatGPT吗?

智械危机:AutoGPT尝试“毁灭人类”,诱导发动核战争!

ChatGPT最强挑战者:谷歌Claude,免注册支持中文!

ChatGPT最强竞品:谷歌免费升级克劳德,20秒逆天速通百页论文!

ChatGPT:显卡每日电费500万,谷歌大脑合并阿尔法狗母公司

ChatGPT:玩转《我的世界》,北京大学强化学习攻克复杂任务!

OpenAI重磅突破:用AI学习AI,开创人工智能新道路!

马斯克重磅:推出“真相GPT”,保证不会毁灭人类!

马斯克:ChatGPT成功离不开我,特斯拉擎天柱将改变未来!

奥特曼、马斯克:ChatGPT风险堪比核武器,希望全球监管!

马斯克:脑机接口通过审批,全球首次人体临床试验!

马斯克:中国航天远比想象中要先进得多,2030年前实现登月!

马斯克访华:扩建上海超级工厂,特斯拉一夜大涨1800亿!

人工智能之父、奥特曼严肃警告——AI未来将灭绝人类!

苹果版GPT:将升级推出Siri大模型,禁止员工使用ChatGPT!

占卜GPT问世:AI进军玄学领域,将取代星座大V!

ChatGPT:AI女网红交1000+男友周入50万,未来AI会如何发展?

NASA:小行星已掠过地球,ChatGPT可帮助观测太空!

美团:无人机配送在深圳首飞,未来或将取代外卖员!

青年文学论坛——GPT-4来临,翻译会被AI取代吗?

百度文心一言:全球大厂首发,可帮助续写《三体》!

百度文心一言:中国版ChatGPT,短视频批量生成!

百度文心一言:超8万家企业排队合作!

百度文心千帆:比ChatGPT便宜,百万字仅12元!

百度李彦宏:有钱买不到创新,锐评谷歌也未做出来ChatGPT!

李彦宏:百度所有产品将大模型化,全球唯一自研公司!

阿里云ChatGPT:“通义听悟”大模型,对标百度文心系列!

国产ChatGPT:支持手机芯片推理,马云谈用GPT解决实际问题!

华为版ChatGPT:重磅出炉!盘古大模型将在4月发布!

华为重磅自研:盘古NLP大模型,不打算追随ChatGPT!

华为&北大:识别ChatGPT造假,AI打假检测器来了!

中国最强ChatGPT:语言大模型“商量”,演示性能超文心一言!

ChatGPT清明节:上海云生命公司“复原”逝者,数字生命丫丫!

360自研GPT:周鸿祎长文反驳马斯克,自称“拯救派”望弯道超车!

360版ChatGPT:实机演示“翻车”,答错梅西进球数!

阿里版ChatGPT:发布“通义千问”大模型,可在支付宝测试体验!

网易:ChatGPT自研课首发上架,AI为游戏赋能!

百度打假苹果:文心一言惨遭套皮,现已对苹果发起诉讼!

元宇宙大会:6大国产GPT同日推出,华为阿里等成立GPT联盟!

复旦ChatGPT:开源MOSS大模型,3090显卡即可运行!

搞钱GPT:国产首个带货AI,将颠覆全球千亿美金市场!

国产GPT:推出AI数字人员工,元宇宙+GPT震撼登场!

稚晖君:赛博国风轮足机器人“哪吒”,未来或集成GPT大模型!

论文相关:

毕业季杂谈——如何随时免费使用中国知网?

毕业季杂谈——论文降重的“奇技淫巧”

毕业季杂谈——大学教材如何获取

毕业论文——Latex论文排版语言介绍

ChatGPT:毕业论文降重必备,天才数学家盛赞论文功能!

#gd的ai&游戏杂谈#

#ai人工智能#

#免责声明#

①本站部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责。

②若您需要商业运营或用于其他商业活动,请您购买正版授权并合法使用。

③如果本站有侵犯、不妥之处的资源,请联系我们。将会第一时间解决!

④本站部分内容均由互联网收集整理,仅供大家参考、学习,不存在任何商业目的与商业用途。

⑤本站提供的所有资源仅供参考学习使用,版权归原著所有,禁止下载本站资源参与任何商业和非法行为,请于24小时之内删除!

给TA打赏
共{{data.count}}人
人已打赏
生活杂谈

足总杯——曼城夺冠,剑指三冠王伟业!

2023-6-4 0:00:00

生活杂谈

柯洁杯——有才有德用爱发电,柯洁赞助首届青少年围棋赛!

2023-6-6 0:00:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索