OpenAI ChatGPT推出Advanced Voice Mode with Vision、Projects功能

图片来源: 

OpenaAI

上周OpenAI的12消息连发活动下,再宣布Advanced Voice Mode with Vision及Projects二项功能,前者让ChatGPT也能看视讯,后者让它可同时储存专案档案和对话。

Advanced Voice Mode是以多模态模型如GPT-4o为基础,让ChatGPT具备听力,以便更流畅、更低延迟和用户交谈。在第6天的新功能发布中,OpenAI为之加入影片、萤幕共享和图片上传支援。影片支援功能让用户将手机对准电视播放的影片问它问题,或是和ChatGPT视讯对话,让ChatGPT一步步教用户完成手冲咖啡。萤幕共享让ChatGPT共享你的手机画面内容,例如一道难解的数学习题,由它解释并带你解题。现在用户更可上传图片要求ChatGPT回答问题。

 

 

这功能目前开放给ChatGPT Plus、Pro 方案用户以手机App存取,ChatGPT Enterprise和Edu用户要等到明年一月。要使用Advanced Voice Mode with Vision,用户手机ChatGPT App必须要升级到最新版,Android App为1.2024.337 版,而iOS App为1.2024.339版。欧盟、瑞士、冰岛、挪威及列支敦士登暂时未能使用,OpenAI并未说明开放时程。

因应圣诞节的到来,OpenAI特别推出应景的Santa Mode,特别开放给所有Teams和大部份(除欧盟、瑞士等地以外的)Plus订阅户。大部份(除欧盟、瑞士以外的)Pro方案用户现在都能使用,OpenAI计划很快让欧盟用户也能享用这功能。

第7项新功能是Projects。ChatGPT Projects提供对话和档案统一管理的新方法,可简化需要大量交谈的工作,类似Anthropic Claude既有专案管理功能。Projects可将对话内容、档案和自订指令储存於单一个地方以方便管理。Projects支援OpenAI的现有功能,包括Canvas文件编辑、进阶资料分析、DALL-E及搜寻。这功能将陆续推向所有ChatGPT 付费用户,包括Teams、Plus、Pro方案,但ChatGPT Enterprise及Edu方案用户要等到明年初。

要使用这功能,可点击Projects右上角的「+」建立新专案,并使用「Add instruction」自订指令。建立的专案可以删除,也可以在Web版或Windows App编辑。不过macOS和手机App中只支援读取专案和对话,无法编辑。

目前Projects还有蛮多限制,例如它使用GPT-4o模型无法转换,而且上传档案的来源尚不支援Google Drive或 Microsoft OneDrive。还有,目前这功能仅提供个人使用,还无法分享他人。