手机端
当前位置:主页 > 科技 >

AI人工智能算法为全国的学生论文打分,教孩子更好地写作



对学生论文进行评分的AI算法是一个黑匣子。算法正在为全国的学生论文打分。那么人工智能真的可以教我们写得更好吗?撰写有关Motherboard的 AI文章评分的文章的Todd Feathers 呼吁该国的每个州,并发现至少21个州使用某种形式的自动评分。“算法容易出现两个缺陷。一个是,它们可以被任何胡说八道的胡言乱语欺骗。从远处看起来不错,但实际上没有任何意义。另外一个问题是,某些算法已由测试供应商自己证明,它们偏向于某些语言背景的人。”

Feathers无法准确确定受此影响的学生人数。但是,这是我们所知道的:这些程序正用于对所有年龄和水平的学生进行分级,从高中生到申请毕业的学生,​​从初中到小学生。很难确定谁会受到AI评分的影响是因为不仅使用了一个程序。由许多不同的公司制定了许多不同的算法。

但是,它们的制作基本上都是相同的:首先,一家自动计分公司会研究评分员的行为。然后,该公司训练一种算法,以预测人类评分员如何根据该数据对论文进行评分。根据程序的不同,这些预测可能以相同的方式始终是错误的。换句话说,它们可能会产生偏差。复位主机Arielle Duhaime-Ross解释说,一旦构建了这些算法,它们就可以大规模重现这些偏差。

还有最糟糕的部分?您无法对算法进行交叉检查,并深入了解为何做出特定决定。这是一个黑匣子。聆听有关Reset的整个讨论。在下面,我们还分享了该集的内容经过轻松编辑的字幕。除了羽毛,您还会听到犹他州父母大卫·哈特(David Hart)的来信。Aoife Cahill,教育测试服务部资深研究科学家;和Vox记者Sigal Samuel。

在Apple播客,Stitcher,Spotify或收听播客的任何地方订阅“ 重置 ” 。Arielle Duhaime-Ross与教育测试服务部高级研究科学家Aoife Cahill进行了交谈。人工智能算法有助于对ETS的GRE和其他标准化测试进行分级。

卡夫(Aoife Cahill)如果您没有正确地训练程序,很有可能会使程序产生偏差。因此,您要确保用于馈送系统以训练系统的数据尽可能无偏。但是您很有可能会引入它,因为系统当然是在向人类学习。因此,[如果您碰巧选择的数据集存在偏差,则计算机将学习该偏差。

艾丽尔·杜海姆·罗斯当您选择一个数据集时,您怎么甚至知道该数据集是否可能有偏差,然后您如何知道它是否实际上在影响机器?

卡夫(Aoife Cahill)实际上,这是一个非常具有挑战性的话题。我们有许多检查。首先,我们要确保首先对论文进行评分的人员都受过良好的训练。他们会受到监控,以确保他们坚持专栏。我们确保由多个人员对回答进行评分,以确保他们的意见大致一致。但这并不完美。这不是一个完美的系统。您可能最终可能会偏向数据集。

艾丽尔·杜海姆·罗斯我们与一位父母交谈,他很沮丧地发现其中一种语言系统并没有真正教孩子如何写作。他认为该程序正在教孩子如何写大字而不是如何写好字。您将如何回应?

卡夫(Aoife Cahill)他可能没错。至少当我们开发工具来支持写作学习者时,我们会尝试与写作社区合作,以找出从事写作研究的人们是什么,他们教的是什么?他们觉得重要的是什么?您知道,拥有一个系统的系统来教授大字词是一项特殊技能,但它可能并不是写得好的核心。良好的写作能力具有多种技能。也许词汇只是其中的一部分,但这不是全部。

艾丽尔·杜海姆·罗斯您阅读了主板文章。您对此有何反应?

卡夫(Aoife Cahill)我的感觉是,人们并不总能了解如何使用这些系统。这些系统可能使用不当,如果允许,那么它们肯定会出现问题。但是我认为,如果使用得当,这些系统实际上可以为教师和学生提供很多好处和支持。而且我认为有些...我对这篇文章最大的失望是它没有给我带来好处。

Duhaime-Ross还与Vox记者Sigal Samuel进行了交谈,后者撰写了有关人工智能的大量文章。她也是小说家。最近,她一直在将AI应用于写作。

西加尔·塞缪尔(Sigal Samuel)当我第一次听说这些语言模型时,我想到了一个奇怪的想法:“我不知道在某个时候,这些AI是否能够比我能更好地编写我的新想法。”

艾丽尔·杜海姆·罗斯因此,您实际上可以仅在此网站上输入几句话,然后看看会发生什么?

西加尔·塞缪尔(Sigal Samuel)究竟。很好玩 我从小说中输入了三,四个句子,然后产生了一堆文字,是续篇。该算法可以分析您的单词,语法,然后吐出它认为应该继续文本的方式。

在这里,我举一个例子。在一个场景中,我的一个角色,一个年轻女子,实际上失去了理智。她的父亲去世了-呃,剧透 实际上,她正处于痛苦之中,正在吃掉他一直在写的这份手稿。因此,我将向您介绍我所写的内容以及AI所写的内容。

“信件跌入我的嘴,我吞了他们;墨水从我的喉咙里倒了出来,然后我喝了。”然后AI说道:“我不知道的词从我的皮肤中流过,我喝了它们,又喝了又喝了一次。我吃饱了,直到呕吐。”

AI提出了一个好主意,那就是我的角色,了一下父亲的话,试图以一种奇怪的方式与他重新建立联系之后,她的身体对此尝试产生了剧烈的身体反应,并且她呕吐了,我喜欢理念。我没想到。回想起来,这将是完美的。

艾丽尔·杜海姆·罗斯这如何使您感觉像艺术家,作家?我觉得我所能想到的就是那种伤害。

西加尔·塞缪尔(Sigal Samuel)我的意思是,我的一部分喜欢,“好吧,该死。”我花了很多年时间磨练自己的技巧并获得创意写作的学位。但老实说,我的大部分都感到非常高兴,因为A)这种新的AI超级酷,并且是一个很有趣的玩具,但是B)我真的真诚地认为这将使我的未来写作变得更强大。我为能够使用GPT-2撰写下一本小说而感到兴奋。

艾丽尔·杜海姆·罗斯您实际上将使用它来编写小说。您将如何使用它?

西加尔·塞缪尔(Sigal Samuel)我正在从事的下一个项目是一本儿童读物。大约有两个小女孩发现了一个房间无限的旅馆,中间有一个黑洞。因此,它们跳入了黑洞,显然在黑洞中有许多虫洞。因此,他们必须弄清楚如何进行导航。...

作为作家,您不一定总是身处MFA研讨会之中,或者只是可以与这些想法作斗争的朋友。因此,让此机器具有音板斜线协作器是一种很好的选择。

艾丽尔·杜海姆·罗斯您对此表示肯定,但我只能假设存在限制。那有什么不好呢?

西加尔·塞缪尔(Sigal Samuel)它在本地化级别上确实很有用,可以帮助您思考特定的问题或写一些很棒的句子,但是对于较大的故事结构来说确实很不利。它只能基于已经存在的...已经放下的东西来生成东西。它不能产生像整个叙事弧一样的小说情节所需要的更大的情节结构,而这会使小说令人满意。

艾丽尔·杜海姆·罗斯您认为它可以在某个时候到达那里吗?

西加尔·塞缪尔(Sigal Samuel)这是可以想象的。我们离那还很远。但是,您知道,在所有文学作品中,只有六个主要故事情节。那里有这样的灰姑娘弧。您知道,富裕有破烂,许多我们的文学作品都有特定的弧线。在我看来,可以教AI模拟那些基本模板,然后模仿字符,单词和场景的细节中的类似位置。我对此持怀疑态度,认为没有任何人参与的AI本身是否会写普利策奖获奖小说。
分享至:

®关于本站文章™ | 若非注明其他来源,默认 均为本站编辑部原创文章,如有侵权,请联系我们™