-
超火迷你GPT-4视觉能力暴涨，GitHub两万星，华人团队出品
白交 发自 凹非寺量子位 | 公众号 QbitAIGPT-4V来做目标检测？网友实测：还没有准备好。虽然检测到的类别没问题，但大多数边界框都错放了。没关系，有人会出手！那个抢跑GPT-4看图能力几个月的迷你GPT-4升级啦——MiniGPT-v2。△（左边为GPT-4V生成，右边为MiniGPT-v2生成）而且只是一句简单指令：[grounding] describe this image in detail就实现的结果。不仅如此，还轻松处理各类视觉任务。圈出一个物体，提示词前面加个 [identify] 可让模型直接识别出来物体的名字。当然也可以什么都不加，直接问~MiniGPT-v2由来自MiniGPT-4的原班人马（KAUST沙特阿卜杜拉国王科技大学）以及Meta的五位研究员共同开发。上次MiniGPT-4刚出来就引发巨大关注，一时间服务器被挤爆，如今GItHub项目已超22000+星。此番升级，已经有网友开始用上了~多视觉任务的通用界面大模型作为各文本应用的通用界面，大家已经司空见惯了。受此灵感，研究团队想要建立一个可用于多种视觉任务的统一界面，比如图像描述、视觉问题解答等。「如何在单一模型的条件下，使用简单多模态指令来高效完成各类任务？」成为团队需要解决的难题。简单来说，MiniGPT-v2由三个部分组成：视觉主干、线性层和大型语言模型。该模型以ViT视觉主干为基础，所有训练阶段都保持不变。从ViT中归纳出四个相邻的视觉输出标记，并通过线性层将它们投影到 LLaMA-2语言模型空间中。团队建议在训练模型为不同任务使用独特的标识符，这样一来大模型就能轻松分辨出每个任务指令，还能提高每个任务的学习效率。训练主要分为三个阶段：预训练——多任务训练——多模式指令调整。最终，MiniGPT-v2 在许多视觉问题解答和视觉接地基准测试中，成绩都优于其他视觉语言通用模型。最终这个模型可以完成多种视觉任务，比如目标对象描述、视觉定位、图像说明、视觉问题解答以及从给定的输入文本中直接解析图片对象。感兴趣的朋友，可戳下方Demo链接体验：https://minigpt-v2.github...
智能设备 2023-10-19 09:56:05 -
Codasip推出下一代700系列RISC-V处理器
IT之家 10 月 19 日消息，Codasip 近日推出了 RISC-V Custom Compute 700 系列处理器，可以根据客户的需求以及应用场景，灵活调整核心配置，不仅可以有效提升性能，而且可以更好地控制成本。700 系列处理器可以同时搭载嵌入式核心（Embedded Processors）和应用核心（Application processors），灵活调整适用于不同场景应用...
智能设备 2023-10-19 09:56:03 -
MIUI再见，澎湃OS你好！小米新系统整合「人·车·家」
今日看点4min readMIUI 再见，澎湃 OS 你好！小米新系统整合「人·车·家」宛辰2023/10/18摘要澎湃 OS，小米的「鸿蒙」。自小米被传要发新系统以来，「米粉」和网友猜测，接替 MIUI 的新系统命名为：MIOS、MiOS、CNMIOS 等等。10 月 16 日，小米集团公关部总经理王化发文提醒，上述命名都是错的，并且一些猜测可能会面临被诉讼侵权的法律风险。他说，「该来的肯定会来的，就不要急这么一天两天了。我们期待美好的事情即将发生。」时隔一天，真名来了。17 日，小米创始人雷军在社交平台发布长文，揭秘小米新系统的真面目——小米澎湃 OS（Xiaomi HyperOS）。文中，雷军称澎湃 OS 是「划时代的里程碑，是迈向「人车家全生态」的关键跨越」。从今天曝光的澎湃 OS 来看，之前传说的小米汽车或许将在月底的小米 14 发布会上曝光，看来并不是空穴来风了。澎湃 OS，是否能让小米「澎湃如昨」？01MIUI 再见，澎湃你好10 月 17 日上午，雷军在个人微信公众号官宣，小米全新操作系统——小米澎湃 OS（Xiaomi HyperOS）正式版完成封包。并且，小米 14 系列是第一款搭载新系统的手机，已交付工厂开始生产。这意味着，MIUI 将逐渐被小米澎湃 OS 接替。对于新系统，雷军表示，「激动不已，心潮澎湃」，并称其为划时代的里程碑，是迈向「人车家全生态」的关键跨越。雷军秀出小米新系统的画面｜雷军微信公众号雷军透露，小米澎湃 OS 已经准备了数年。2014 年，从 IoT 业务开始初具规模起，小米就开始了探索式开发和验证。2017 年，全新系统研发工作正式开启，以一套融合的系统框架统一支持全生态设备与应用。它基于深度进化的 Android 以及自研的 Vela 系统融合，彻底重写底层架构，为未来百亿设备、百亿连接做万物互联的公有底座。过去 13 年，「旧系统」——MIUI 系统在小米不断增长的生态里赢得用户。从几个工程师到四五千人的软件团队；从最初的「100 个梦想赞助商」，到全球 11.75 亿累计用户；从第一版只有 4 个常用功能，到跨端互联互通的底层深度框架……MIUI 给「米粉」带来了易用、人性化的系统体验。但现在，小米已经不止有智能手机，还有跨 200 多个品类的巨大智能生态，以及更重要的——车。加上车以后，「各种设备涉及的操作系统分支之复杂、数量之庞大，不同系统及协议之间造成的生态连接隔阂，超过很多人的想象」。新一代操作系统成为刚需。02手机+车机，小米「澎湃」来袭「万物互联」这个概念并不新鲜，小米此前依靠智能家电和智能手机之间连接形成的「全家桶」生态就积累了一众粉丝。这次澎湃 OS 真正的变化核心，是加入了智能电动汽车，以打造「人车家全生态操作系统」。尽管还没有最终官宣获得工信部造车牌照，但小米造车也一直在推进过程中，雷军也早早喊出「这是人生最后一次创业」的口号。智能电动汽车之所以被视为「下一代个人智能终端」，原因就在于除了传统汽车行业的复杂工业、电池技术的研发和创新外，还要把智能化开发、操作等加入其中。小米汽车谍照 | 网络「澎湃」的推出，是对汽车智能化操作的重大利好。可以从消费者侧和开发者侧两个角度理解：在消费者侧，基于新的架构和底座，车主大概率可以得到一个更流畅丝滑的操作系统。做一个比喻，过往人们喜欢把车内的大屏幕比喻成「彩电」——突出的是显示性能，但基于流畅的系统，智能汽车们的屏幕正在迈入平板时代。这是完全不同的体验。智能手机厂商和新造车品牌之间的互动，也实际成为了近年一个行业趋势。华为的智选车模式，就是把一系列智能化优势运用上车；吉利汽车收购魅族手机，以求在旗下品牌领克的车机开发上取得更好的体验；蔚来汽车也在上个月官宣了第一款「为汽车开发的手机」NIO Phone。除了软件和系统层面的变化，不同硬件设备之间的交互也可以变得更丝滑和顺畅。一个月前，蔚来发布手机 NIO Phone，车主用手机和车机的屏幕碰一碰，就可以投屏到车机上，以简单易用的交互方式，解锁更广泛的功能。比如，手机收到微信朋友发的吃饭地址，车机可以自动识别地址，自动导航到目的地。而在开发者侧，底层架构和底座的打通，意味着开发在不同设备和系统间，可以减少系统适配等工作，让开发变得更简单。9 月，新问界 M7 凭借华为的鸿蒙系统、智驾能力和 Mate 60 系列的影响力，交出了一个月大定超过 6 万台的满分成绩；一个月后，当雷军开始出牌，也就让人们对即将呼之欲出的小米汽车产生了更大期待。雷军指出，新系统「以人为中心，打造人车家全生态操作系统」。小米澎湃 OS（Xiaomi HyperOS）意旨「生态」。早在 2019 年，华为就提出了「1+8+N」生态链战略，鸿蒙成为共同的入口。在这里，「1」即智能手机，是整个生态链的核心；「8」则是指华为 PC、平板、穿戴、AI 音箱、耳机等各类终端产品，N 是由产业链合作伙伴做的产品。如果单从生态角度来看，小米大概是目前唯一能和华为硬刚一下的公司。澎湃 OS，或许就是小米的「鸿蒙」。而巨头之间的竞争，已经从硬件进化到了系统和生态层面。小米 ...
智能设备 2023-10-19 02:16:02 -
一文看懂百度世界：文心一言4.0堪比GPT-4大模型出路被整明白了？
“没有构建于基础模型之上的丰富的AI原生应用，基础模型就没有任何价值。”在今天的百度世界2023大会上，李彦宏道出了大模型的“出路”。李彦宏曾在多个公开场合表示，要把全部产品用AI重做一遍。据网易科技了解，百度移动生态的应用层也早已经展开内部“竞赛”，所有产品都在基于AI原生思维进行重构。今天，李彦宏也终于兑现承诺，在大会上展示了百度搜索、文库、网盘、地图、营销等各业务线在AI加持下的新成果。1. 文心大模型4...
智能设备 2023-10-19 02:15:52 -
观点｜APUS李涛：大模型是AI时代的灵魂，将重塑千行万业
【网易科技10月18日报道】近日，APUS董事长兼CEO李涛在第四届深圳国际人工智能展上发表演讲，表示APUS将坚持“四步走”路线，即内部提效工具、现有产品进化、AI+场景重塑、构建新产业引擎，并指出“大模型是AI时代的灵魂，将重塑千行万业，引领行业革新”的大模型定位。据了解，此次APUS获得了 「最佳人工智能企业」、「最具品牌影响力人工智能企业」双项企业级奖，李涛荣膺「2023年中国人工智能卓越人物奖」，共3项大奖...
智能设备 2023-10-19 02:15:50 -
百度智能云上线国内首个“AI原生应用商店”
允中 发自 凹非寺量子位 | 公众号 QbitAI在10月17日举行的百度世界2023上，百度智能云宣布，百度智能云千帆大模型服务平台已服务17000多家客户，覆盖近500个场景。同时，新的企业和开发者还正在不断地涌入千帆，大模型调用量高速攀升...
智能设备 2023-10-19 02:15:18 -
“AI造车”引爆全民热潮，壳牌开启能源品牌互动营销新纪元
这几年，技术的快速变革不断推动市场营销行业的发展，层出不穷的新兴概念让消费者目不暇接。今年上半年，随着ChatGPT、Midjourney为代表的人工智能大模型在全网掀起热议，AIGC已经替代元宇宙成为新的风口...
智能设备 2023-10-19 02:15:07 -
精确率提升7.8%！首个多模态开放世界检测大模型MQ-Det登NeurIPS2023
新智元报道编辑：LRS【新智元导读】MQ-Det在已有基于文本查询的检测大模型基础上，加入了视觉示例查询功能，同时保留了高泛化性能和细粒度多模态查询，在ODinW-35基准上实现SOTA性能。目前的开放世界目标检测模型大多遵循文本查询的模式，即利用类别文本描述在目标图像中查询潜在目标，但这种方式往往会面临「广而不精」的问题。论文链接：https://arxiv.org/abs/2305...
智能设备 2023-10-19 02:15:01 -
百度李震宇：大模型将走向多模态，塑造完全自动驾驶的汽车机器人
雷递网 乐天 10月17日百度创始人、董事长兼首席执行官李彦宏昨日在百度世界大会上表示：“未来的AI原生应用一定是多模态的，在信息世界之外，一定会重构物理世界，自动驾驶就是视觉大模型重构物理世界的一个典型应用。大模型会让百度的自动驾驶能力超越经验系统，更聪明地处理复杂场景，实现更广泛的时空覆盖。”在当天下午的百度世界大会2023“大模型‘重构’智能汽车”论坛上，百度集团资深副总裁、智能驾驶事业群组总裁李震宇表示：大模型的“智能涌现”带来理解、生成、推理、记忆等核心能力的突破，让汽车具有EQ和IQ，将重构智能汽车业态。未来的大模型还将走向多模态，塑造出完全自动驾驶的汽车机器人。萝卜快跑将越来越接近商业化盈利在智舱方面，语言大模型的上车，让人和车交互方式会从“命令式”升级到“对话式”，推动人车关系升级为人和虚拟人的关系。大模型将重构人车交互方式，让交互更加自然。以文心大模型为基础，百度Apollo为汽车座舱打造了专属大模型技术底座。人和车的交互不再需要复杂的按键操作，用语音就能操控，即便是七嘴八舌、多人指令、声音交织、连续对话的情况下，智能座舱也能理解每个人不同的需求，同时满足。目前，百度Apollo智舱大模型加持的产品将在极越01、凯迪拉克、别克、吉利银河等品牌车型中实现量产搭载。在智驾方面，通过Transformer和BEV等新技术彻底重构自动驾驶技术栈，感知能力获得代际感提升，加速纯视觉方案的成熟和普及。百度称，百度Apollo纯视觉高阶智驾方案可应用于高速、城市、泊车等全域场景，将在今年第四季度实现量产，这是国内首个纯视觉方案在城市场景落地。去掉激光雷达让整车成本更低，提升了市场竞争力。大模型还将走向多模态，重构物理世界，自动驾驶就是大模型重构物理世界的一个典型代表。大模型让自动驾驶超越经验系统，更聪明地处理复杂场景，实现更广泛的时空覆盖，塑造出完全自动驾驶的汽车机器人。百度称，百度自动驾驶出行服务平台萝卜快跑，已经是全球最大的自动驾驶出行服务商，累计提供了超过400万次服务。随着运营规模的不断扩大、技术水平的不断提升，成本更低的自动驾驶车辆的规模化部署，萝卜快跑将越来越接近商业化盈利。李震宇表示，百度在人工智能、深度学习等领域投入超过十年，在智能汽车领域也探索了十年，十年日拱一卒的技术积累、实践是百度Apollo信心和底气的来源。大模型让全无人自动驾驶真正落地，汽车智能化的浪潮也将快速到来。大模型“重构”智能汽车的三条关键路径近年来，智能驾驶在用户整体购车因素的占比快速上升，在“选购前最重视因素”占比从1.2%突破到30%，成为用户购车核心决策因素。智能汽车市场正处在规模化量产前夕，智能汽车底层智能化技术也在发生重构，让AI原生出行时代更快到来。李震宇认为，大模型对智能汽车行业的重构主要体现在三个方面。语言大模型上车，人车交互方式会从“命令式”升级到“对话式”；通过Transformer和BEV等新技术彻底重构自动驾驶技术栈，感知能力获得代际感提升，加速纯视觉方案的成熟和普及；未来的大模型还将走向多模态，塑造出完全自动驾驶的汽车机器人。会上还发布了多款智驾和舱驾融合产品。百度Apollo量产的Apollo Highway Driving Pro进一步演进，发布了新一代Apollo City Driving，使得使用场景从封闭道路升级到城市开放道路，功能场景无限接近全域。百度称，纯视觉城市领航高阶智驾产品Apollo City Driving Max将于2023年第四季度量产落地。与此同时，百度Apollo还行业首发了Apollo Robo-Cabin舱驾一体软芯融合智算平台，它是中国首个能够完成甚至是全球首个真正意义上在单SOC上实现了舱驾融合运行的平台。活动现场，百度Apollo与航盛签署战略合作，宣布将共同基于高通平台打造新一代舱驾融合产品。雷递由媒体人雷建平创办，若转载请写明来源。 ...
智能设备 2023-10-19 02:14:57 -
AIAgent，启动！复旦NLP团队发86页长文综述，智能体社会近在眼前
新智元报道编辑：Lumina【新智元导读】近日，一篇探讨基于LLM的Agent综述论文在X上火了！仔细一看，论文署名中甚至一度还有米哈游。9月19日，Jim Fan转发了一篇来自复旦NLP团队对基于LLM的Agent的综述。Agent是能够感知自身所处环境、自我决策并采取行动的人工智能实体。该论文介绍了基于LLM Agent的一般概念框架，包括大脑、感知和行动；以及LLM Agent的应用场景、由LLM Agent组成的社会等。还讨论了LLM Agent领域中的一系列关键议题和开放性问题。有趣的是，在arXiv上提交的前两版论文中，注明了与米哈游合著，论文中则以原神中的海灯节为例，介绍了一个理想中的由AI Agent组成的社会。论文地址：https://arxiv.org/pdf/2309...
智能设备 2023-10-19 02:14:55 -
大模型无法替代码农！普林斯顿芝大惊人发现：GPT-4解决GitHub编程问题成功率为0
新智元报道编辑：编辑部【新智元导读】ChatGPT之类的AI编码工具来势汹汹，Stack Overflow又裁员了！不过，普林斯顿和芝大竟发现，面对真实世界GitHub问题，GPT-4的解决率竟是0%。Stack Overflow，已经被ChatGPT创飞了！因为码农大量涌向ChatGPT、Github Copilot，Stack Overflow今天不得已宣布裁员100多人，几乎占员工人数的1/3。所以，ChatGPT这类AI编码工具，真的要颠覆整个行业了？不过最近，普林斯顿和芝大的一项研究发现，LLM想要替代码农，其实没那么容易。论文地址：https://arxiv.org/abs/2310...
智能设备 2023-10-19 02:14:55 -
苹果承认部分iPhone15机型存在烧屏问题，iOS17.1将修复
IT之家 10 月 18 日消息，苹果公司今天发布了 iOS 17.1 RC 版本更新，特别针对苹果 iPhone 15、iPhone 15 Pro 系列机型，修复了“可能导致图像残留”的问题。苹果自推出 iPhone 15 手机以来，陆续有用户反馈称新款机型出现严重烧屏问题。有人猜测这可能是 OLED 显示屏的硬件问题，现在苹果通过软件方式修复了烧屏问题。虽然大多数显示问题的报告来自“iPhone 15”用户，但也有一些使用 iPhone 13 Pro 和 iPhone 12 Pro 设备的用户看到了类似的问题，这可能就是为什么苹果的发行说明没有具体提及“iPhone 15”的原因。IT之家注：如果你当前使用的 iPhone 出现烧屏问题，那么可以尝试升级到 iOS 17...
智能设备 2023-10-19 02:14:53
