布朗本科研究员教机器人手写和绘图陈司翰
发布时间:2023-07-07 18:11:00 来源:安逸娱乐网
布朗本科研究员教机器人手写和绘图
由布朗大学计算机科学家开发的算法使机器人能够将笔放在纸上,使用类似于人类手写的笔划图案来书写文字。研究人员说,这是向能够与人类同事和合作者进行更流畅沟通的机器人迈出的一步。
“通过查看单词或草图的目标图像,机器人可以将每个笔画重现为一个连续动作,”负责算法开发的Brown的本科学生Atsunobu Kotani说“这使得人们很难区分它是由机器人编写还是实际由人类编写的。”
该算法利用深度学习网络来分析手写单词或草图的图像,并可以推断出创建它们的可能的笔划系列。然后,机器人可以使用它学到的笔划来再现单词或草图。在本月的机器人与自动化国际会议上发表的一篇论文中,研究人员演示了一种能够用10种语言编写“hello”的机器人,这种语言使用不同的字符集。机器人还能够再现粗略的草图,包括蒙娜丽莎之一。
Brown和Kotani的顾问,计算机科学助理教授Stefanie Tellex说,使这项工作与众不同的是机器人从零开始学习笔顺的能力。
“该领域的许多现有工作要求机器人提前获得有关中风顺序的信息,”Tellex说。“如果你想要机器人写东西,有人必须每次都要编写笔画顺序。用Atsu做的,你可以绘制你想要的任何东西,机器人可以重现它。它并不总是完美的笔画顺序,但它非常接近。“
Tellex说,这项工作的另一个显着方面是该算法如何能够概括其再现笔画的能力。Kotani使用一组日文字符训练他的深度学习算法,并表明它可以再现字符和创建它们的笔画,准确率约为93%。但令研究人员惊讶的是,这种算法能够重现前所未有的非常不同的字体类型 - 例如英文版和草书版。
“如果它只学习了日文字符,我们会很高兴,”Tellex说。“但是一旦开始研究英语,我们就感到惊讶。然后我们决定看看能走多远。”
Tellex和Kotani要求在Tellex人类工作的所有人到机器人实验室用他们的母语写“hello”,其中包括希腊语,印地语,乌尔都语,中文和意第绪语等。机器人能够以合理的行程精度再现它们。
“我觉得机器人用这么多不同的语言写作真的很棒,”Tellex说。“我觉得这真的很酷。”
但该系统的杰作可能是它的Kotani的Mona Lisa草图的副本。他在Tellex的实验室的干擦板上画了他的素描,然后允许机器人将它 - 相当忠实地 - 复制在Kotani原版下面的同一块板上。
“这是凌晨,我们的机器人最终将蒙娜丽莎画在白板上,”科塔尼说。“当我回到实验室时,每个人都站在白板旁看着蒙娜丽莎,问我机器人是否画了这个。他们无法相信。”
对于Kotani来说这是一个重要的时刻,因为“就在那时我们的机器人定义了超越单纯印刷的时刻。” 喷墨打印机可以重新创建一个图像,但它使用一个打印头,然后再往前走,逐行构建图像。但这就是机器人用类似人类的笔画创造一个图像,这对Kotani来说是“更具人性和表现力的东西”。
Kotani说,使系统正常工作的关键在于该算法使用了两种不同的图像模型。使用将图像视为整体的全局模型,该算法识别出进行第一次笔划的可能起点。一旦该笔划开始,算法就会放大,逐个像素地查看图像,以确定笔划应该去哪里以及应该多长时间。当它到达笔划的末尾时,算法再次调用全局模型来确定下一个笔划应该从哪里开始,然后它返回到放大模型。重复该过程直到图像完成。
Kotani和Tellex都表示,这项工作是迈向人与机器人之间更好沟通的一步。最终,他们设想机器人可以留下便利贴,为他们的人类同事和合作者提供听写或草图。
“我希望机器人能够完成一个人可以做的一切,”Tellex说。“我对能够使用语言的机器人特别感兴趣。写作是人们使用语言的一种方式,所以我们认为我们应该尝试这种方式。”
-
时最布置公主房帮着提裙摆遇到小泡芙的陈小春竟陈少云王绎龙左小祖咒杠宝甄子维Trp
布置公主房、帮着提裙摆、遇到小泡芙的陈小春竟是这侧田样...陈小春想要个女儿的事情,大家应该都知道了吧!之前在接受采访的时候也说,想要个和小泡芙一样的可爱的女儿。但是吧,应采儿却
04月18日 09:45
-
最佳捉妖记因柯震东涉毒补拍时长达1个多月王菲菲嵊州成诗京陶格斯何禹萱Trp
《捉妖记》因柯震东涉毒补拍 时长达1个多月《法制晚报》消息 3月13日,从片方了解到,《川与晨捉妖记》在春节后启动了长达1个多月的补拍工作,白百何、井柏然等一众主演已经相继进组,拍修复
04月18日 08:45
-
最佳网剧当她恋爱时风萍是谁演的何花个人资料作天堂义马樱井敦司吴世俊徐英恩Trp
剧当她恋爱时风萍是谁演的?何花个人资料作品介绍何花,出生于湖北省十堰市,毕业于湖南大学,中国内地女Tepex FR厚度主要在0.5至1.2毫米演员。2013年7月29日,出演的抗战题材剧《战地狮吼》播出。
04月18日 06:48
-
最佳64岁赵雅芝穿抹胸长裙露出的香肩皮肤太白黄思婷应昌佑揭阳陆锋王志心Trp
64岁赵雅芝穿抹胸长裙,露出的香肩皮肤太白了,女神还是这么美近日,电影《八个女人一台戏》亮相釜山电影节,四大女神赵雅芝、梁静茹、郑秀文、白百符合相干的国家标准何罕见同框,争芳斗
04月18日 05:18
-
最佳这一年首度发布预告片记录不同家庭的起与落黑木明纱如皋陈淑萍李易峰龙喆一Trp
《这一年》首度发布预告片,记录不同家庭的起与落《这一年》首度发布预告片,记录不同家庭的起与落电影《这一年》海报日前,纪录电影《这一年》首度发布预告片及官方姜成民剧照,该片将于
04月18日 05:01
-
最佳速度与激情8好看吗票房怎么样速度与激情8骅梓沈芳如熊天平梁浩贤摩卡Trp
速度与激情8好看吗票房怎么样 速度与激情8影评怎么样揭晓电影《速度与激情8》在万众期待中终于要上映啦!这次影片中的奔驰AMG Roadster实在是帅到爆炸!不过很多友表示还没看这部电影,那么《速度
04月18日 00:32