Meta公司,作为全球领先的科技公司,近日发布了一款名为“变色龙”(Chameleon)的新型多模态AI模型。这一创新举措不仅展示了Meta在人工智能领域的技术实力,也标志着多模态学习领域迈出了重要的一步。“变色龙”模型的核心特点在于其早期融合(early-fusion)的方法,它能够无缝处理文本和图像,将这两种模态的信息混合在一起,并通过统一的基于Transformer的架构进行端到端的训练。这种设计使得模型能够更有效地融合跨模态信息,生成包含任意形式信息的多模态文档。在技术细节上,“变色龙”模型采用了创新的分词技术,将图像转换为Token序列,例如将512x512像素的图像分割成1024个离散的Token序列。此外,模型还采用了基于SentencePiece开源库的BPE算法,扩充了文本和图像的词汇表至65536个。然而,这种创新的设计也带来了挑战。为了解决优化稳定性和模型扩展性的问题,Meta的研究团队引入了一系列架构创新和训练技术。这些技术包括QK归一化、注意力层和前馈层之后的dropout,以及在损失函数中使用Zloss正则化等。图:Meta公司推出AI多拟态模型“变色龙”模...
北京时间5月23日,Meta首席人工智能科学家、深度学习先驱杨立昆(Yann LeCun)提出了对当前生成式AI产品,如ChatGPT背后的大语言模型的批判。他认为,这些模型永远无法实现像人类一样的推理和规划能力。这一观点引发了对人工智能发展方向的深入思考。杨立昆的批判基于对现有AI技术的深刻理解。他指出,尽管大语言模型在处理语言任务上取得了显著成就,但它们缺乏真正的推理和规划能力。这是因为这些模型大多依赖于模式识别和大量的数据输入,而非真正的理解或意识。换句话说,它们能够生成连贯的文本,但并不理解文本的深层含义或逻辑。图:永远无法取代人类!杨立昆揭秘生成式AI致命缺陷与此相对,杨立昆提出了一种激进的替代方法:在机器中创造“超级智能”。这一概念指的是一种超越人类智能的人工智能,它能够进行复杂的推理、规划,并具有自我意识。超级智能将不仅仅是执行命令的工具,而是能够进行创造性思考和独立决策的实体。杨立昆的这一观点与当前AI研究的一些趋势相呼应。例如,一些研究者正在探索如何使机器学习模型更加透明和可解释,以便更好地理解它们的决策过程。此外,还有人在研究如何赋予机器常识推理能力,使它们能够更好...
华为智能汽车业务在启动五年后成功摆脱亏损,这一成就凸显了华为在汽车领域的战略眼光和坚定执行力。余承东的表态不仅彰显了华为在汽车业务上的自信,也反映了公司对未来汽车行业的深刻洞察和长远规划。华为智能汽车解决方案业务部自2019年成立以来,通过持续的研发投入和市场拓展,实现了从亏损到盈利的转变。这一转变的背后,是华为在智能汽车领域的创新驱动和市场策略。根据华为2023年年度报告,智能汽车解决方案业务的收入显著增长,成为华为增长最快的业务板块之一。这一增长得益于华为智选车业务下的多款车型的热销,以及与多家车企的深入合作。图:华为汽车业务的利润如何?华为在2023年的年度报告显示,该公司去年实现全球销售收入7042亿元人民币,净利润870亿元人民币。这表明华为在2023年第四季度的利润表现是积极的,因为净利润同比增长了144.5%。而在2024年第一季度,华为实现了营收约1784.5亿元,同比增长36.66%;归母净利润约196.5亿元,同比增长564.04%。这一显著的增长主要得益于Mate 60系列手机和问界汽车的热销所带来的增量收入。这反映出华为在经历了一系列挑战之后的强劲反弹,并有望超...
月产400万颗高端芯片,年产值数十亿。致真存储芯片制造项目正式举行开工奠基仪式,这标志着中国在存储芯片领域的又一次重要进展。该项目位于青岛市西海岸新区古镇口,占地面积50亩,预计将建设新一代磁性随机存储芯片加工工艺线,以加速磁存储芯片的产业化进程。项目的开工奠基,是中国存储芯片产业发展的一个缩影。随着全球数字化转型的加速,对于高性能存储芯片的需求日益增长。特别是在人工智能、物联网、大数据等新兴技术领域,存储芯片扮演着至关重要的角色。致真存储芯片制造项目的启动,将有助于缓解国内对于高端存储芯片的依赖,提升国产芯片的自给能力。图:青岛致真存储芯片制造项目正式开工该项目的建设将带来经济效益和产业带动效应。根据致真存储官方消息,项目建成达产后,将实现月产400万颗高端芯片,年产值数十亿。这不仅能够为当地经济发展贡献重要力量,还将吸引相关上下游企业进行落地布局,形成产业集群,推动整个存储芯片产业链的发展。致真存储芯片制造项目的开工,也体现了中国在推动科技创新和产业升级方面的决心。新一代磁性随机存储芯片(MRAM)作为一种新型存储技术,具有速度快、功耗低、非易失性等优点,是未来存储技术发展的重要方...
在全球半导体产业格局中,美国的贸易政策正引发一系列连锁反应。美国决定提高中国大陆半导体产品的进口关税,这一决策不仅影响了中美两国的贸易关系,也对全球供应链产生了重大影响。据台湾地区相关业内人士透露,台湾晶圆代工厂已开始接收从大陆芯片制造商转移出的电源管理集成电路(PMIC)订单,台湾晶圆代工厂因此成为受益者。美国关税政策的影响美国提高对中国大陆半导体产品的进口关税,直接导致了中国半导体产品进入美国市场的成本增加。这一政策变动迫使采购商寻找替代供应商以规避额外成本。根据华福电子的点评,半导体关税将在2025年从25%提高到50%。这种关税提升对价格敏感的半导体市场构成了压力。台湾晶圆代工厂的机遇台湾作为全球晶圆代工的重要基地,拥有成熟的技术和产能优势。在中美贸易紧张的背景下,台湾晶圆代工厂成为了一个自然的替代选择。台湾的半导体公司,如台积电(TSMC),在全球半导体代工市场占据领先地位,能够提供高质量的产品和服务。图:美对大陆半导体产品加税,客户订单转移,台湾晶圆代工厂受益大陆晶圆代工厂的挑战与应对尽管面临美国关税政策的挑战,中国大陆晶圆代工厂也在积极调整应对。根据摩根大通的报告,中国大...
香港特区立法会财务委员会近期批准了一笔高达28.4亿港元的拨款,这一重要决策标志着香港微电子研发院的成立,该中心将专注于开发半导体技术,尤其是第三代半导体,包括碳化硅(SiC)和氮化镓(GaN)。这一举措不仅是对香港科技发展的一次重大投资,也是在全球半导体产业竞争日益激烈的背景下,香港积极布局未来,力求在高科技领域占据一席之地的战略行动。图:28亿港元打造香港微电子研发院,专注于第三代半导体技术开发首先,这笔拨款体现了香港特区政府对于科技创新和产业发展的重视。在全球范围内,半导体技术是推动现代科技发展的关键,尤其在新能源汽车、智能设备、可再生能源解决方案等领域发挥着至关重要的作用。通过成立香港微电子研发院,香港不仅能够促进本地产业升级,还能吸引全球人才和资本,推动经济多元化发展。其次,该研究中心的成立有望加强香港与内地以及国际间的科技合作。通过与大学、研发中心以及产业界的紧密合作,香港微电子研发院将成为推动产学研一体化的重要平台。这种合作模式有助于加速技术成果的转化,促进创新链与产业链的深度融合。然而,这一决策也面临着一定的挑战。在中美科技战不断升级的国际政治背景下,美国可能通过制裁等...