早在今年3月OpenAI发布GPT-4模型时，就展示过看图的功能，但由于安全、功能不完善等原因一直没有开放。现在不仅开放了看图，连识别声音也来了，这是OpenAI实现AGI（通用人工智能）战略重要技术环节。
OpenAI表示，在接下来的两周内，向Plus和企业版用户提供看、听、说功能。语音功能将在 iOS 和 Android上使用，图片识别全平台可以使用。
ChatGPT新的语音功能由一个文本到语音模型提供支持，能够仅通过文字和几秒钟的样本语音生成类似人类的音频。
，将用户的语音转录成文本。简单来说，以后用户想将文本直接生成语音，可以在ChatGPT中完成了。
例如，让ChatGPT听一段小猫咪的文本故事，然后选择人类语音便可以一键完成转录。完成后，用户可以下载这段语音。
ChatGPT的图片理解功能由 GPT-3.5 和GPT-4 提供技术支持，可理解的图片类型包括照片、屏幕截图或包含文本的图片等。
OpenAI表示，其目标是构建既安全又有益的AGI（通用人工智能）。所以，ChatGPT的功能正在逐步推出。这样做的好处是，可以让OpenAI有时间进行改进，逐步完善安全漏洞、风险。
特别是新的语音技术，可以在几秒内就能生成真实的合成声音，这可能会为者提供了便利条件，所以，这种安全的研发策略对于涉及语音和视觉的高级模型非常重要。
目前，Spotify已经使用ChatGPT的语音功能，开发一款语音翻译助手，可以将博主的声音自动翻译成其他语言，扩大用户群体。而Be My Eyes将ChatGPT的看图功能，植入在应用中，为盲人和弱视群体提供服务。
