麻花豆传_热点分析_大模型落地，跑得麻花豆传快更要跑得稳

大模型落地，跑得麻花豆传快更要跑得稳

作为实施乡村振兴战略的重要产业，上海虹桥花谷产业园倾力打造花卉产业新高地、都市郊游新天地、上海花卉第一村，促进产村融合发展，努力为杨家庄村“上海市乡村振兴示范村”建设提供更为有力的产业支撑。同时，产业园扎实抓好招商引资和入驻企业、商户“三落地”工作，壮大园区自身实力、服务当地经济发展。自2022年12月项目开工至今，新引进96户企业和商户落户。还将充分利用园区产业载体和乡村路、田、桥、河、宅，以花为媒介导入商旅文教功能，推出沉浸式体验项目，促进绿色消费。

　　【AI世麻花豆传界】　　◎本报记者崔爽　　比盛夏的上海更火热的是2024世界人工智能大会暨人工智能全球治理高级别会议（以下简称“WAIC2024”）。大会线下参观人数突破30万人次，创历史新高。　　值得注意的是，WAIC2024的首发首秀不仅涉及模型更新换代，还涵盖应用、平台、系统等。行业和观众的目光更多投向与模型落地紧密相关的交互体验、商业模式等领域。　　一个引发广泛关注的问题是，随着大模型能力不断增强，其安全性、可靠性、可控性也日益受到挑战。尤其是面对行业用户合法合规、精准可控等要求，大模型可能存在的数据安全、幻觉等成为绕不过的问题。　　中国信息通信研究院华东分院人工智能事业部主任常永波说，应用价值与应用安全是大模型发展的两翼，当前大模型已进入快速迭代期，在积极探索落地应用的同时，大模型厂商也要高度重视应用场景需求下对安全的行业要求。　　技术自身缺陷不容忽视　　依托庞大参数规模、海量训练数据、强大算力资源，大模型作为人工智能领域最热门的技术分支，已在多个领域表现出超越人类的能力。　　“金融、医疗、教育、政务、制造等众多领域都在积极探索大模型安全应用范式，以应对大模型安全风险。”常永波介绍，伴随大模型的深度应用，产学研用各方都在加强大模型安全威胁和防御技术体系研究。在原有可信人工智能治理体系框架基础上，提升大模型的鲁棒性、可解释性、公平性、真实性等能力成为行业研究热点。安全评测技术和安全防御技术的不断成熟，有效护航大模型发展。　　WAIC2024上，清华大学、中关村实验室、蚂蚁集团等机构联合撰写的《大模型安全实践（2024）》白皮书（以下简称“白皮书”）正式发布。白皮书显示，大模型技术存在自身缺陷，包括生成内容不可信、能力不可控以及外部安全隐患等问题。　　“幻觉是大模型目前比较难解决的问题。”常永波说，模型在遵循语法规则的同时，可能产生虚假或无意义的信息。这一现象源于大模型基于概率推理的输出方式。它可能导致对模糊预测的过度自信，从而编造错误或不存在的事实，影响生成内容的可信度。“智能涌现”是大模型的另一种效应，它可以让模型展现出色性能，也具有突发性、不可预测性和不可控性等特征。　　另外，大模型的脆弱性和易受攻击性使外部安全隐患难以消除。相关数据显示，随着大模型技术快速发展，相关网络攻击也在增多。　　聚焦安全可靠可控性建设　　大模型带来的种种风险，对监管方、学术界、产业界是全新且不可回避的问题。　　近年来，《互联网信息服务算法推荐管理规定》《互联网信息服务深度合成管理规定》《生成式人工智能服务管理暂行办法》《科技伦理审查办法（试行）》等政策法规相继发布，搭建起我国人工智能治理的基本框架。一系列政策法规坚持发展与安全并重原则，强化科技伦理风险防控，从技术发展与治理、服务规范、监督检查与法律责任等层面对大模型安全发展提出要求。　　白皮书提出，构建大模型安全政府监管、生态培育、企业自律、人才培养、测试验证“五维一体”的治理框架。　　在监管方面，常永波介绍，敏捷治理正成为一种新型治理模式。该模式以柔韧、流动、灵活及自适应为特点，倡导多元利益相关者共同参与，能快速响应环境变化。在实施治理策略时，结合柔性伦理规范和硬性法律法规，构建完善的治理机制，在规制大模型风险的同时平衡创新与安全。　　“为确保大模型在实际应用中发挥最大效能，防止潜在风险和滥用，大模型建设通常会聚焦三个重要维度：安全性、可靠性和可控性。”蚂蚁集团安全实验室首席科学家王维强解释，安全性意味着确保模型在所有阶段都受到保护，防止任何未经授权的访问、修改或感染，保障人工智能系统无漏洞、免诱导；可靠性要求大模型在各种情境下都能持续提供准确、一致、真实的结果，这对于决策支持系统尤为重要；可控性关乎模型在提供结果和决策时能否让人类了解和介入，以便人类根据需要进行调适和操作。　　王维强特别提到时下备受关注的Agent（智能体）。他说，Agent是目前大模型落地的关键路径，但复杂的Agent体系进一步扩大了大模型风险敞口。目前RAG（检索增强生成）、指令遵循、知识图谱嵌入等方法可有针对性地提升模型输出的可控性和准确性。　　合力推动人工智能健康发展　　“目前来看，让大模型完全不犯错几乎不可能，但减小犯错几率，减弱错误危害性，是可以做到的。”常永波说，安全治理需产学研共同发力，中国信息通信研究院已开展一系列标准和测评研究，头部厂商也在加速构建自身的安全和治理体系。　　蚂蚁集团安全内容智能负责人赵智源介绍了相关经验。一方面，在大模型产品投入应用前，企业需做好全面评测，对暴露出的安全问题展开针对性防御，把好入口关；相关产品进入市场后，也要时刻监控可能出现的风险隐患，进行技术补救和改进。另一方面，模型技术通常跑在安全技术前，行业研究要保持一定前瞻性。　　“我们很早就开始探索基于安全知识构建视觉领域生成内容风险抑制的技术。在多模态大模型发布后，我们又将这一技术集成到多模态基座中，降低风险内容生成比例。”赵智源介绍，蚂蚁集团已构建起面向产业级应用的大模型安全一体化解决方案“蚁天鉴”2.0版本，形成包括大模型基础设施测评、大模型X光测评等在内的测评和防御技术链条，并已运用于金融、政务、医疗等专业场景下的AI应用全流程。　　常永波说，大模型落地门槛正在大幅降低，大量中小企业在模型安全治理方面的能力较弱，有些甚至不符合基本的合规要求。解决这些问题，需要监管的进一步引导和头部厂商的能力释放。　　“我们现在已把‘蚁天鉴’的测评能力框架开源，将来也会把检测能力以及对风险的认知更多分享到平台上，它可以适配较多模型。希望我们提供的开放能力能帮助大模型行业持续健康发展。”王维强说，模型厂商离用户最近，可第一时间发现安全隐患，并通过和监管保持良性沟通互动，助力大模型安全落地。　　清华大学长聘副教授李琦认为，大模型安全应用是一个新兴领域，研究和应用尚处于起步阶段。随着新的实践不断深入发展，相关技术也会持续升级，为建构大模型安全实践范式打造高价值参考体系。　　人工智能治理是全球性问题。WAIC2024开幕式上发布的《人工智能全球治理上海宣言》提出，高度重视人工智能的安全问题。宣言强调，以发展的眼光看问题，在人类决策与监管下，以人工智能技术防范人工智能风险，提高人工智能治理的技术能力。宣言呼吁，推动制定和采纳具有广泛国际共识的人工智能的伦理指南与规范，引导人工智能技术的健康发展，防止其被误用、滥用或恶用。

koa12jJid0DL9adK+CJ1DK2K393LKASDad

编辑:孙念祖

TOP1热点：花十万可以买八套房的鹤壁真实的楼市是什么境况？

孩子们开心地接过学员证。

1993年至今，太平洋百货在上海相继开出徐汇店、淮海店、不夜城店，1990年代至2000年代深受上海市民欢迎，是上海最红的百货商场之一。但随着新消费潮流涌现、购物中心等零售业态推陈出新，激烈竞争之下，太平洋百货上海各家门店陆续在合约期满后宣布谢幕。

TOP2热点：美国驻华大使的画风变了，但又似乎没变

“上海国拍2023年第446期”9月19日【民品专场（第131场）】和田玉专场网络在线拍卖会

学校坚持立德树人根本任务

TOP3热点：花十万可以买八套房的鹤壁真实的楼市是什么境况？美国ZOOMCLOUDMEET...

创新是引领发展的第一动力，保护知识产权就是保护创新。8月25日上午，奉贤区举行“政府开放月”市场监管局专场活动。本次活动以“保护知识产权优化营商环境”为主题，邀请部分市民代表、人大代表和政协委员一起实地参观了区市场监督管理（中部）综合服务窗口、区知识产权快速维权中心等服务大厅，近距离了解全区知识产权保护和投资工作相关情况。

当事人发布“昇生源”牌保健品“番茄红素多烯酸乙酯软胶囊”和“达洛康胶囊”广告，其中含有“增强人体免疫力、攻克血栓、对心脑血管疾病、动脉硬化等疾病均有较好疗效”“纯天然植物提取保健品更安全呵护您的健康！调节血脂”等内容，夸大产品用途，对保健食品宣称疾病治疗功能，违反了《广告法》第十八条第（二）款的规定。2023年4月，松滋市市场监管局依法对当事人作出责令停止发布违法广告，在相应范围内消除影响，并处罚款25万元的行政处罚。

TOP4热点：中国斡旋俄乌和谈，这国酸了丁香花高清在线观看完整版

上午10时30分，区人大常委会主任戴骅宣布大会开幕！与会人员全体起立，高唱国歌。

随后，大会举行了宪法宣誓仪式，侯继军等面向国旗庄严宣誓。

TOP5热点：高考倒计时不足1个月，教育部部署这个重中之重搞鸡

建立职称评审“直通车”。聚焦重点产业“高精尖缺”科技创新人才，对上海企事业单位引进的海外高层次科技人才、业绩贡献突出的民营企业高层次人才，可比照同类人员直接申报高级职称评审。截至2022年，全市共有约500人通过“直通车”取得高级职称，其中海外回国人才约占20%，主要集中在集成电路、人工智能、生物医药、经济管理等重点领域。