新闻

那位警告AI可能酿成灾难性后果的研究者,如今加入了OpenAI安全委员会

中文

保罗·克里斯蒂亚诺多年来站在行业之外,研究人工智能可能如何严重失控,如今OpenAI却把他请进了评判自家安全工作的委员会。此外,甲骨文云业务三个月内增长121%,Anthropic对人工智能到2030年可能给美国经济带来的影响进行了建模,印度则下水了一艘用于测绘海底地形的科考船,并重申了2035年建成自主空间站的目标。

tuput 编辑部 · · 1 分钟阅读

周四的AI新闻大多围绕着一个问题展开:谁有资格检查机器的工作,以及要维持这场竞赛的盈利、继续烧钱建设,背后押上了多少真金白银。OpenAI把一位资历深厚的外部怀疑论者,请进了评判自家安全流程的位置。甲骨文交出了一份连自家分析师都感到意外的季度财报。Anthropic则尝试用实打实的数字,去描绘未来四年人工智能可能给美国就业市场带来的最好和最坏情形。在印度,两项酝酿多年的政府计划都有了更实在的进展:一艘用于测绘那些从未被彻底勘测过的海域的科考船下水,一个国产空间站的建成时间也被再次确认。

那位警告AI可能严重失控的研究者,如今要评判OpenAI的安全工作

9月9日,OpenAI宣布保罗·克里斯蒂亚诺加入OpenAI基金会董事会,并进入安全保障委员会,这个由齐科·科尔特领导的机构,负责评估新模型是否足够安全、可以发布。克里斯蒂亚诺并非公司内部一步步提拔上来的自己人。他自2017年起在OpenAI工作,参与撰写了那篇帮助确立“基于人类反馈的强化学习”方法的论文,这项技术训练模型去优先给出人们评价更高的答案。2021年他离开公司,创立了非营利机构对齐研究中心,专门研究强大的人工智能系统可能以其创造者从未预料的方式行事,并多年来持续发布各类灾难性后果的概率估计,这类数字是大多数AI实验室宁愿避而不谈的。

克里斯蒂亚诺同时还担任政府职务,是美国国家标准与技术研究院下属人工智能标准与创新中心的高级技术顾问。为避免利益冲突,他将在涉及OpenAI的NIST事务以及OpenAI自身的模型评估中回避表态,并且只以无投票权观察员的身份列席OpenAI Group PBC的董事会,而非正式成员。把一位以认真对待AI风险著称的研究者请进安全决策的房间,这本身就是一场赌注:外部审视会比内部自我把关更靠得住。但这并不能改变一个事实:最终决定如何处理他的建议的,仍然是OpenAI自己,而不是克里斯蒂亚诺。

甲骨文云业务三个月增长121%,产能却依然不够用

甲骨文于9月10日公布了2027财年第一季度业绩,即便放在这轮AI热潮的标准下,这些数字也称得上惊人。总营收同比增长30%,达到193亿美元。云基础设施业务,也就是为AI工作负载出租算力的那部分,营收增长超过一倍,涨幅121%,达到74亿美元。云业务总营收增长62%,达到116亿美元。净利润增长60%,达到46.8亿美元,甲骨文已签约但尚未交付的合同积压,也就是所谓的“剩余履约义务”,达到6640亿美元,其中仅本季度新签的AI云计算订单就超过300亿美元。

问题在于,甲骨文花钱的速度比营收进账的速度还快。本季度自由现金流实际上为负50亿美元,因为公司一直在往新数据中心和GPU上砸钱,才能跟上需求。即便如此,甲骨文还是上调了全年业绩指引,将2027财年营收目标定为至少900亿美元。这一个数字,就是整场AI基础设施竞赛的缩影:一家公司故意维持现金赤字,因为在它看来,拒绝生意才是更大的风险。

Anthropic为2030年的美国经济建了模,自家数据也显示出一场艰难的取舍

9月9日,Anthropic发布了“经济情景探索器”,这是一款交互工具,任何人都可以调整关于AI进步速度及其在经济中扩散程度的假设,然后查看模型推算出的到2030年GDP、工资和失业率会受到怎样的影响。工具设定了三种命名情景。在“温和情景”下,AI最终产生的影响大致相当于互联网当年的水平,美国GDP将达到34.1万亿美元,比经济原本预期的产出高出约1.6%。在“显著情景”下,GDP将达到36.3万亿美元,增速大致是正常水平的两倍,失业率稳定在5%左右,知识型岗位的工资则大体持平。在“极端情景”下,GDP可能达到44.4万亿美元,但知识型岗位的失业率也会大幅上升,因为AI开始以超过经济创造新岗位速度的节奏,自动化那些原本由人来完成的认知性工作。

Anthropic强调这些只是模拟情景,而非预测,并且特意把工具设计成可以让读者自行输入数字,而不是只能接受默认设定。值得注意的是,一家靠卖AI为生的公司,公开发布了一个情景:自家产品取得最大成功的那种版本,恰恰会给使用它的劳动者带来实实在在的代价。这比大多数行业内部的经济预测都要诚实得多。

印度下水一艘可勘测六公里深海底的科考船

9月9日,海洋科考船“萨加尔·曼坦”号在加尔各答的里希·班基姆造船厂下水,由国有企业加登里奇造船工程公司为地球科学部下属的国家极地与海洋研究中心建造。联邦部长吉滕德拉·辛格通过视频连线出席,并与妻子曼珠·辛格一同为该船命名。这艘船长89.5米,宽18.8米,总吨位5900吨,最高航速14节,是印度国内建造的同类船只中的第一艘,专为包括南大洋在内的极端环境设计,预计使用寿命30年,造价约84亿卢比,按当前汇率计算接近9000万美元。

这艘船的设计用途是在深达六公里的海域开展多波束测深和地震勘测,采集水样和海底样本,布放系泊装置和数据浮标,并进行洋流与气象观测,是政府“深海使命”计划的一部分。辛格将此次下水定位为印度海洋科学自主自立的一部分,他表示,这类船只带来的数据将让印度能够用自己的仪器追踪极地冰川消融和气候变化,而不必依赖其他国家的科考船队。这艘船目前尚未完工,预计将于2028年交付并正式服役。

莫迪在巴黎峰会宣布:印度要在2035年建成空间站,2040年送人登月

9月10日,印度总理纳伦德拉·莫迪在巴黎国际空间峰会上发表讲话,公布了印度计划中的空间站“婆罗多空间站”的时间表:2028年建成首个舱段,2035年建成由五个舱段组成、全面运行的空间站。他还重申了2040年送印度宇航员登月的目标。这两个时间点都不是新消息,均与印度政府此前批准的路线图一致,因此巴黎的这番表态与其说是新宣布,不如说是在国际场合公开重申一项已经在推进中的计划。

莫迪列举了两项近期成果,作为这一时间表可行的依据:2023年的月船3号任务,让印度成为首个在月球南极附近成功着陆的国家,以及仍在传回太阳观测数据的阿迪蒂亚L1太阳探测任务。他还表示,已有来自34个国家的430多颗卫星搭乘印度火箭升空,这个数字也反映出,如今印度的航天项目在科研任务之外,商业发射业务已经占据相当大的比重。演讲最后,他呼吁太空活动继续遵循国际法、保持开放合作,而不要沦为单边行动的又一战场,在场坐着几个航天竞争对手,这句话可谓意有所指。

今天的每一条新闻,其实都指向同一种张力:一个你无法完全看透内部运作的系统,究竟能被信任到什么程度,而打造能让你看得更远的工具,又要付出怎样的代价。OpenAI押注的是,一位外部怀疑论者能让它的模型比内部委员会做到的更安全。甲骨文押上的是自己眼下并不具备的现金流,去换取几乎跟不上需求的GPU产能。Anthropic试图为一个自家产品可能颠覆的未来建模,诚实到连那个对劳动者不利的版本也如实呈现。而印度做的事情则更加直白:造一艘真正能下潜六公里去看清楚的船,并坚守一个把空间站真正送入轨道的具体日期,因为有时候,想知道得更多,唯一的办法就是亲自去看。

Share
Copied!

资料来源与延伸阅读

  1. OpenAI: Paul Christiano joins OpenAI Foundation Board
  2. Unite.AI: OpenAI Names Paul Christiano to Foundation Board and Safety Committee
  3. PANews: AI Alignment Researcher Paul Christiano Joins OpenAI Foundation Board and Safety and Security Committee
  4. Alignment Research Center: Paul Christiano, author page
  5. CNBC: Oracle (ORCL) Q1 earnings report 2027
  6. Investing.com: Oracle Q1 FY2027 slides, cloud infrastructure surges 121%, guides $90B+
  7. Benzinga: Oracle Reports Q1 2027 Results, Full Earnings Call Transcript
  8. Anthropic: Scenarios for our Economic Future
  9. Qz: Anthropic AI economy scenarios 2030
  10. PANews: Anthropic Launches AI Economic Scenario Analysis Tool
  11. Marine Insight: Indian Navy Launches Advanced Ocean Research Vessel ORV Sagar Manthan
  12. India Education Diary: Union Minister Dr. Jitendra Singh Launches India's Advanced Ocean Research Vessel ORV Sagar Manthan
  13. Sentinel Assam: India's First Indigenous Ocean Research Vessel Launched by GRSE
  14. ANI News: Over 430 satellites from 34 countries travelled aboard Indian rockets, PM Modi hails ISRO at International Space Summit
  15. Tribune India: Space station by 2035, man on moon by 2040, PM Modi sets lofty space mission goals
  16. PIB: India will have its own Space Station by 2035, which will be known as Bharatiya Antariksh Station

本文在 AI 工具协助下研究与撰写,并经编辑核实。仅供一般参考与讨论,不构成专业建议。请参阅我们的编辑准则免责声明。发现错误?告诉我们

#ai#openai#paul christiano#ai safety#alignment research center#oracle#cloud computing#anthropic#economic scenario explorer#india#ocean research vessel#grse#deep ocean mission#isro#space station#daily roundup

喜欢这篇吗?下一篇也别错过。

每次一篇好文章,直接送到你的邮箱。绝无垃圾邮件,随时可退订。

同类更多: 新闻
Anthropic首次承认:无法保证AI不会助长生物武器研发
Anthropic表示无法再保证自家AI不会助长生物武器研发。此外,萨姆·奥特曼表态愿意放慢开发节奏,加利福尼亚州出台聊天机器人安全新法,印度第四次主办金砖国家峰会。
六家中国AI公司被指抄袭美国顶尖模型,美国的对策是悄悄让它们的回答变差
一份美国安全预警指控六家中国AI公司抄袭美国模型,并建议悄悄给它们提供质量更差的回答。此外还有DeepMind绘制的人类DNA所有可能突变图谱、苹果以AI为核心的iPhone发布会,以及印度史上规模最大的铁路扩建。
OpenAI称其AI破解了一个90年的数学难题,一位数学家却说这用的是他自己的成果
一道悬而未决90年的数学难题,OpenAI与一位外部数学家之间的署名之争,一份最高可达600亿美元的芯片协议,欧洲史上最大的AI融资轮,还有印度一位板球守门员的创纪录长打。
← 全部文章