彩多多|彩多多
彩多多2023-01-31 16:05

彩多多

向善而生的AI助盲,让AI多一点,障碍少一点******

  有人说,盲人与世界之间,相差的只是一个黎明。在浪潮信息研发人员的心中,失去视力的盲人不会陷入永夜,科技的进步正在力图给每一个人以光明未来。

  AI助盲在人工智能赛道上一直是最热门的话题之一。以前,让失明者重见光明依靠的是医学的进步或“奇迹”。而随着以“机器视觉+自然语言理解”为代表的多模态智能技术的爆发式突破,更多的失明者正在借助AI提供的感知、理解与交互能力,以另一种方式重新“看见世界”。

  新契机:多模态算法或将造福数以亿计失明者

  科学实验表明,在人类获取的外界信息中,来自视觉的占比高达70%~80%,因此基于AI构建机器视觉系统,帮助视障患者拥有对外界环境的视觉感知与视觉理解能力,无疑是最直接有效的解决方案。

  一个优秀的AI助盲技术,需要通过智能传感、智能用户意图推理和智能信息呈现的系统化发展,才能构建信息无障碍的交互界面。仅仅依靠“一枝独秀”超越人类水平的单模态人工智能比如计算机视觉技术还远远不够,以“机器视觉+自然语言理解”为代表的多模态算法的突破才是正确的新方向和新契机。

  多个模态的交互可以提升AI的感知、理解与交互能力,也为AI理解并帮助残障人士带来了更多可能。浪潮信息研发人员介绍说,多模态算法在AI助盲领域的应用一旦成熟,将能够造福数以亿计的失明者。据世卫组织统计,全球至少22亿人视力受损或失明,而我国是世界上盲人最多的国家,占世界盲人总数的18%-20%,每年新增的盲人数量甚至高达45万。

  大挑战:如何看到盲人“眼中”的千人千面

  AI助盲看似简单,但多模态算法依然面临重大挑战。

  多模态智能算法,营造的是沉浸式人机交互体验。在该领域,盲人视觉问答任务成为学术界研究AI助盲的起点和核心研究方向之一,这项研究已经吸引了全球数以万计的视障患者参与,这些患者们上传自己拍摄的图像数据和相匹配的文本问题,形成了最真实的模型训练数据集。

  但是在现有技术条件下,盲人视觉问答任务的精度提升面临巨大挑战:一方面是盲人上传的问题类型很复杂,比如说分辨冰箱里的肉类、咨询药品的服用说明、挑选独特颜色的衬衣、介绍书籍内容等等。

  另一方面,由于盲人的特殊性,很难提取面前物体的有效特征。比如盲人在拍照时,经常会产生虚焦的情况,可能上传的照片是模糊的或者没有拍全,或者没拍到关键信息,这就给AI推理增加了难度。

  为推动相关研究,来自卡内基梅隆大学等机构的学者们共同构建了一个盲人视觉数据库“VizWiz”,并发起全球多模态视觉问答挑战赛。挑战赛是给定一张盲人拍摄的图片和问题,然后要求给出相应的答案,解决盲人的求助。

  另外,盲人的视觉问答还会遭遇到噪声干扰的衍生问题。比如说,盲人逛超市,由于商品外观触感相似,很容易犯错,他可能会拿起一瓶醋却询问酱油的成分表,拿起酸奶却询问牛奶的保质期等等。这种噪声干扰往往会导致现有AI模型失效,没法给出有效信息。

  最后,针对不同盲人患者的个性化交互服务以及算法自有的反馈闭环机制,同样也是现阶段的研发难点。

  多解法:浪潮信息AI助盲靶向消灭痛点

  AI助盲哪怕形式百变,无一例外都是消灭痛点,逐光而行。浪潮信息多模态算法研发团队正在推动多个领域的AI助盲研究,只为帮助盲人“看”到愈发精彩的世界。

  在VizWiz官网上公布的2万份求助中,盲人最多的提问就是想知道他们面前的是什么东西,很多情况下这些物品没法靠触觉或嗅觉来做出判断,例如 “这本书书名是什么?”为此研发团队在双流多模态锚点对齐模型的基础上,提出了自监督旋转多模态模型,通过自动修正图像角度及字符语义增强,结合光学字符检测识别技术解决“是什么”的问题。

  盲人所拍摄图片模糊、有效信息少?研发团队提出了答案驱动视觉定位与大模型图文匹配结合的算法,并提出多阶段交叉训练策略,具备更充分的常识能力,低质量图像、残缺的信息,依然能够精准的解答用户的求助。

  目前浪潮信息研发团队在盲人视觉问答任务VizWiz-VQA上算法精度已领先人类表现9.5个百分点,在AI助盲领域斩获世界冠军两项、亚军两项。

  真实场景中的盲人在口述时往往会有口误、歧义、修辞等噪声。为此,研发团队首次提出视觉定位文本去噪推理任务FREC,FREC提供3万图片和超过25万的文本标注,囊括了口误、歧义、主观偏差等多种噪声,还提供噪声纠错、含噪证据等可解释标签。同时,该团队还构建了首个可解释去噪视觉定位模型FCTR,噪声文本描述条件下精度较传统模型提升11个百分点。上述研究成果已发表于ACM Multimedia 2022会议,该会议为国际多媒体领域最顶级会议、也是该领域唯一CCF推荐A类国际会议。

  在智能交互研究方面上,浪潮信息研发团队构建了可解释智能体视觉交互问答任务AI-VQA,同时给出首个智能体交互行为理解算法模型ARE。该研究成果已发表于ACM Multimedia 2022会议。该研究项目的底层技术未来可广泛应用于AI医疗诊断、故事续写、剧情推理、危情告警、智能政务等多模态交互推理场景。

  眼球虽然对温度并不敏感,但浪潮信息的研发团队,却在努力让盲人能“看”到科技的温度,也希望吸引更多人一起推动人工智能技术在AI助盲、AI反诈、AI诊疗、AI灾情预警等更多场景中的落地。有AI无碍,跨越山海。科技的伟大之处不仅仅在于改变世界,更重要的是如何造福人类,让更多的不可能变成可能。当科技成为人的延伸,当AI充满人性光辉,我们终将在瞬息万变的科技浪潮中感受到更加细腻温柔的善意,见证着更加光明宏大的远方。

春节文化盛宴五彩斑斓******

  兔年春节前后,国内电视台和网络平台等制作、播出了数十台春节联欢晚会和特别节目,精彩纷呈,热闹欢腾,吸引了海内外众多观众的目光。

  凸显团圆和温暖

  中国社会科学院世界传媒研究中心秘书长、研究员冷凇说,这些晚会在策划之初,就希望以浓浓年味凸显团圆的意义,厚植家国情怀,以关怀民生的内容和凝聚丰富意蕴的视听手段抚慰大众心灵,提振时代精神。

  1月22日大年初一当晚,约有10台省级春节联欢晚会齐贺新春,湖南卫视等播出的《四海同春2023全球华侨华人春节大联欢》(以下简称“湖南华人春晚”)独树一帜。总导演邹志勇、刘樱表示,防疫政策优化调整后,人们特别渴望相见、团圆,所以这台晚会确定了团圆、欢快的整体基调。晚会邀请多位海外华侨华人同胞来到现场,有在法国围棋队长期任教的教练,有创立东非第一家电商平台的海外创业者,还有发展华文教育的泰国华文教师公会负责人。几位海外建设者代表也回国参加晚会,他们是建设卡塔尔世界杯场馆的工程师、巴基斯坦杂交水稻订单项目主管和“一带一路”重点项目匈塞铁路的工程技术人员等。

  《2023川渝春节联欢晚会》(以下简称“川渝春晚”)重在呈现川渝两地血脉同源、文化同心特质,展示成渝地区双城经济圈蓬勃发展的生动图景,诠释“川渝一家亲,欢乐幸福年”的春节氛围。

  兔年春节前后,河南卫视10台晚会闹新春,其中《欢乐春节 和合共生音乐会》《中国杂技大联欢》和《“卯”足劲头弄春潮——2023河南春节晚会》(以下简称“河南春晚”)更吸引眼球。尤其是河南春晚,以10余个节目打造了一场台上台下大联欢。总导演陈雷说,这台充满欢声笑语的晚会让观众享受简单直接的快乐,体会细腻丰富的情感。

  体现地域文化特色

  从美食到美景,从民歌到民俗,从传统非遗到新国潮,这些晚会将各地的地域人文符号囊括其中,并以此延伸,与城乡百姓生活同频共振,各具特色。

  《2023辽宁卫视春节联欢晚会》(以下简称“辽视春晚”)发挥喜剧特色,相声、小品等语言类节目坚持供给“快乐”,聚焦百姓“幸福梦”,充满欢乐与温暖,展现东北人民热情、豪迈、幽默、淳朴的精神气质。

  当红相声演员、相声界前辈、新晋喜剧人、知名歌手等齐聚《2023天津卫视相声春晚》,通过相声、小品、素描喜剧等多种形式的混搭,展现普通人对美好生活的追求,为观众送上一场欢乐盛宴。

  此外,川渝春晚在演播室打造了生机腾腾的小吃街、沉浸式茶馆,以川剧戏歌、散打评书传递川渝人民的真诚和热情;东南卫视《山海福地·福气来——2023福建新春福气夜》(以下简称“东南春晚”)引入影视叙事手法,聚焦福建的生活之美和文化之兴;《2023遇兔呈祥大湾区——广东卫视春节晚会》(以下简称“广东春晚”)演绎了优美动听的粤剧和最近在网络上火爆一时的“英歌舞”,备受关注。

  “炫”出传统文化与时尚味道

  春节是中国最重要和最具文化内涵的节日。以中华优秀传统文化为核心和纽带的节目,更易引发观众情感共鸣。这些晚会致力于挖掘中华优秀传统文化并进行时尚表达,展现年轻化的地域印象。

  湖南华人春晚上,琵琶演奏家方锦龙、二胡演奏家金玥联袂湖南卫视虚拟数字主持人小漾,共同带来一首既传统又时尚的《市集》;川渝春晚将《康定情歌》《赛马》搬进“川渝茶馆”,西洋乐器和民族乐器合奏出巴蜀韵和“国际范儿”;河南春晚以改编自热剧《梦华录》的《新东京梦华录》,上演“相声+歌舞”的“宋朝奇遇记”。

  晚会上,一些戏曲节目的编排令人耳目一新:《2023年北京广播电视台春节联欢晚会》的《大戏看北京之梦中人》把戏曲与流行音乐结合起来,充满故事性;河南春晚的《一曲六百年》以情景化演绎方式,重现戏曲艺术从明代以来的发展历程,回归京剧、昆曲、豫剧的演出舞台;湖南华人春晚的《最忆梨花开》邀请梅尚程荀四大名旦传人表演戏曲名段,并在荧屏首次聚集4位京剧大师的戏装、画作等进行展现,戏迷们拍手叫好。

  中华文化的丰厚内蕴还成就了多个优秀舞蹈节目:辽视春晚的乐舞《散乐图》取材于辽代壁画,生动再现了辽沈大地的灿烂文化和多民族融合发展的深厚积淀;湖南华人春晚上,4位青年舞者表演的《迦陵频伽》让敦煌壁画中人首鸟身、步步生莲的妙音鸟“活”了起来;广东春晚的《锦鲤戏莲》结合水上杂技和水中舞蹈,张扬了意象隽永之美、形式新颖之美和文化自信之美。

  国风说唱也佳作频出。宝石老舅的《山河图》船政版,热情歌颂祖国大好河山,制造东南春晚高燃惊喜;GAI(周延)以国风说唱演绎川江号子,体现巴蜀文化魅力;歌手拉丹珠、陈香水等的《说唱看湖南》带观众感受了拥有厚重古色、炽热红色、盎然绿色、亮丽夜色的“四色”新湖南。

  海外传播出新出彩

  这些晚会大部分在电视台和互联网平台进行了直播,让海内外华侨华人寄托对故土和亲人的情感,也进一步扩大中国春节文化在全世界的影响力。

  河南春晚总导演之一、执行策划之一徐娜介绍,河南春晚在中国日报客户端等5个平台累计浏览量破500万次,收看群体重点覆盖了美国、加拿大、澳大利亚、印度尼西亚、泰国、新加坡等。

  辽视春晚邀请世界太极拳冠军杨德战和他的团队站在大鼓上表演太极,被新华社脸书和推特报道后,引发外国网友的“围观”和点赞。一位美国网友留言评论道:“中国从未停止培养世界级高水平运动员,也从未停止过提升民众的生活质量。他们一直尽可能地在做一些有意义的事情。”

  邹志勇、刘樱说,今年湖南华人春晚在海外产生了很大的影响力。给他们带来意外之喜的,是晚会上播放的短片《我在海外过春节》。短片邀请很多海外博主记录他们如何花样过春节,其中有留学生在法国用民族乐器演奏新春音乐,有百岁老人在澳大利亚和“华三代”孙女一起写书法,有美国华人家庭做一桌天南地北风味的年夜饭招待五湖四海的朋友等。他们参与湖南华人春晚后很兴奋,通过自己的媒体平台再次传播这台晚会,真正做到了大小屏联动。

  冷凇认为,春节联欢晚会和特别节目弘扬了中华文化,凝聚了华人情感,促进了文明互鉴。将至已至,未来已来。观众们享受完这一场场文艺盛宴之后,以更加坚定的信心和更加饱满的精神状态,再次开启奔向美好生活的新征程!(本报记者 苗 春)

  (来源:人民日报海外版 2023年02月03日 第07版)

中国网客户端

国家重点新闻网站,9语种权威发布

彩多多地图