GPT4刚发布就有手机APP接入,上传照片视频一键解读
萧箫 发自 凹非寺
量子位 | 公众号 QbitAI
GPT-4刚发布,就已经有手机应用接入了!
只需要上传图像,再用语音提出需求,GPT-4就能帮助视障人士"看清"眼前的世界。
随时随地,实时解读,就像聊天对话一样自然。
例如想要换装,却不知道手里的衣服是什么颜色:
只需要拍照上传给GPT-4,它很快就能将衣服纹理描述出来,材质、颜色和形状一清二楚:
△翻译by有道
在此之前,视障人士除了用手触摸以外,辨别物体往往需要依靠身边的人或是志愿者的帮助。
有网友看到后赞叹:这是目前见过最令人惊叹的GPT-4应用之一!
所以,加入了图像理解功能的GPT-4,究竟展现出了哪些能力?基于GPT-4读图能力打造
这个基于GPT-4的新功能名叫Virtual Volunteer ,来自应用Be My Eyes 。
目前来看,包括问路、导航、读取菜单、搜索等功能,接入GPT-4的Virtual Volunteer都能很好地帮用户完成。
例如问路 。
只需要拍一张所在地点的照片,再通过语音询问GPT-4如何到达指定地点,它就会输出一条完整路线图,"读"给用户听:
△翻译by有道
又例如读图翻译 。
只需要给GPT-4看眼物品描述、甚至只是物体形状,它就能搜索并输出这个产品的功能、具体说明和使用方法。
△翻译by有道
再例如公众场合导航 。
想去健身房、却无法掌握空闲的器材位置,只需要拍摄所在场景照片,GPT-4就能指引你走到无人的器材面前。
△翻译by有道
当然,还有点菜、使用自动贩卖机买饮料、搜索某种植物的名字、给出时装建议……
只要将需求告诉GPT-4,它就能帮助视障人士解决对应的问题。
不过,目前这一功能还在测试中,苹果商店可以加入等待列表,至于安卓版也快来了。
搭载它的应用Be My Eyes,是一个为盲人开发的公益应用。
它最早是一个2012年成立的互助社区,并于2015年上线iOS版本应用,随后又上线了安卓版应用。
这个应用分为志愿者和盲人两个群体,志愿者会接受盲人传过来的照片或视频,通过语音沟通(打电话) 帮助他们解决困难,目前已经有接近45w+视障人士和630w+志愿者使用。
如果成为一名志愿者,则只需要保持在线,确保随时可以接听到视障人士的电话。
如果是视障人士使用,则可以在需要帮助时拨打志愿者电话,或是寻求一些专业人士的帮助:
现在加入Virtual Volunteer之后,盲人也可以呼叫"虚拟志愿者"GPT-4的帮助,不用担心深夜无人应答的问题。
官方还玩了个谐音梗,AI→Eyes,"让AI成为你的眼睛":
还当起美版知乎问答bot
当然,除了Be My Eyes应用以外,不少其他APP也在争先恐后接入GPT-4。
例如,在美版知乎Quora 出的Poe 上,现在已经可以和GPT-4聊天(限免一句话) :
又像AI律师软件DoNotPay ,同样已经接入了GPT-4,并计划用它来推出"一键诉讼"服务。
基于这个服务,你看不顺眼的电话诈骗,一键就能举报投诉。
如果接到电话诈骗,只需要点击一个按钮,对应的电话内容就会被全程录音,并生成1000字的诉讼内容,索赔1500美元的金额。(不过目前还只有美国地区适用)
值得一提的是,DoNotPay的CEO Joshua Browder表示,他们之前也用GPT-3.5做过类似的功能,但效果不太行,GPT-4则已经能很好地hold住这一要求。
甚至已经有网友尝试用GPT-4来搞药物发现了……
除了上述应用和功能以外,还有网友察觉到了GPT-4开发小游戏的前景。
新的GPT-4似乎在编程靠谱度上也有所提升,无论是在60秒内做一个打乒乓球小游戏:
还是20分钟之内搞出一个完整的贪吃蛇:
都可以说是游刃有余,提出更改需求也可以及时完成,编写的简单程序中基本上没有遇到需要修改的bug。
你还想到了什么GPT-4好玩的应用场景吗?
参考链接:
[1]https://twitter.com/BeMyEyes/status/1635690254689599488
[2]https://twitter.com/skirano/status/1635736107949195278
[3]https://twitter.com/ammaar/status/1635754631228952576
[4]https://www.bemyeyes.com/download
[5]https://twitter.com/jbrowder1/status/1635720431091974157
— 完 —
量子位 QbitAI · 头条号签约
关注我们,第一时间获知前沿科技动态
快递员越来越难招,快递柜有望迎来第二春?日前,有消息称小米智能快递柜关联公司完成首轮融资5000万元,投资方为小米集团和菜鸟集团,不过很快被各方否认了投资消息。真假消息的背后,折射出末端最后一公里发展的不易。在快递小哥越
下一波牛市CNTM是否能成为AI板块龙头?自2023年初以来,AI代币的受欢迎程度和价格呈爆炸式增长。一款名为ChatGPT的聊天机器人程序开始在海外爆火,到今年2月份,ChatGPT更成为几乎每天都能见到相关热搜的顶流。
基金代销江湖变局银行颓势渐显,券商收复失地2022年的基础市场巨震,搅动了基金代销江湖。近日,中基协公布了2022年四季度销售机构非货公募基金销售保有规模数据。与前两年的高歌猛进相比,2022年的成绩单表现不佳。总体来看,
荷城2022年成绩单公布!这两项成绩分别列佛山镇街第三第五2月17日,佛山市高明区荷城街道召开政情通报会,公布了去年的成绩单。2022年荷城街道综合实力不断攀升,在佛山市32个镇街发展规模中排名第5名,规上工业总产值2641。52亿元(同
建筑业新春座谈会吹响奋进号角近日,电白区组织召开建筑业高质量发展新春座谈会,区相关领导区建筑业协会和企业家代表共聚一堂,谈经验强信心,话发展。这场建筑业的新春座谈会,对2022年以来电白区建筑业发展情况进行了
高通胀和加息双重压力下美国民众信用卡债务恶化增长18。5创新高据美国全国广播公司财经频道(CNBC)2月3日报道,在美联储上周再次加息后,信用卡年利率已经接近20。与此同时,越来越多的美国民众依靠信用卡来支付日益昂贵的生活必需品,而高通胀和利
经济复苏,只是富人的盛宴,与普通人关系不大?疫情之后,K型复苏一词逐渐走红。此词由摩根大通的分析师提出,最初是用来描述美国疫情后经济活动复苏的分化,然而,就其复苏分化这一本质特征来说,已成为一种全球性普遍现象。K型现象在经济
深港三大财媒联动开启深港湾商联通香港商报记者徐艳琼读创深圳商报记者肖晗香港经济导报记者胡倩怡2月18日,在粤港澳大湾区发展规划纲要发布4周年之际,由香港商报深圳商报香港经济导报合办的深港湾商联通财经栏目正式开启,
聚焦高质量发展新业态受青睐辽宁电商直播让消费旺起来新华网沈阳2月18日电(刘舒)日前,由辽宁省商务厅主办,辽宁省沈抚改革创新示范区管委会承办,各市商务主管部门支持的辽宁省第三届电商直播节暨2023辽宁网上年货节圆满落下帷幕。数据显
微信不用绑定银行卡也可以支付了,只需一步就搞定,简单又实用现在的微信很大众化了,只要是智能手机都有微信这款软件,它不仅是聊天交友的工具,也是一款支付工具。大家都知道我们在微信里要进行发红包或者转账时,BiXu先实名认证,而且还要绑定本人的
今日分析朗玛信息优刻得冰川网络汤姆猫一朗玛信息概念家庭医生互联网医疗网络游戏公司持续开展下沉式医疗服务模式,探索以39健康医疗服务平台为基础的慢病管理的产品体系,通过全新的O2O医疗服务模式,将部分诊疗环节转移到线上