设为首页收藏本站

四季歌文学社区

 找回密码
 立即注册(鼓励中文名字)

QQ登录

只需一步,快速开始

查看: 448|回复: 2
打印 上一主题 下一主题

[智能文化创作经验谈] 本网新诗参赛作品人机(智能)结合诗评活动总结与思考

[复制链接]
  • TA的每日心情

    昨天 23:16
  • 签到天数: 408 天

    [LV.9]以坛为家II

    跳转到指定楼层
    楼主
    发表于 2023-10-14 19:43:57 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式

    欢迎你来注册,这里有更多的热心朋友期待你的加盟参与。

    您需要 登录 才可以下载或查看,没有帐号?立即注册(鼓励中文名字)

    x
    本帖最后由 司马鸣冀 于 2023-10-15 19:07 编辑

                                        关于本网新诗月赛参赛作品人机(智能)
                                            结合诗评及打分活动的总结与思考


              一、本年度九月新诗月赛人机(智能辅助)诗评活动的背景及特点

           (一)领导重视。本网文学团队有关领导非常重视此次新诗月赛活动,把此项活动作为提升文友(诗友)创作水准的重要环节,及时提出了对参赛作品进行智能辅助评价评分的严格工作要求,从而为本网首次顺利开展新诗月赛作品智能辅助诗评和打分,尔后进行人工打分及综合统计评价工作指明了努力方向。
          (二)主题突出。这次月赛活动以“秋”为主题,力求突出秋季的美丽与意境。要求所有参赛作品必须为原创,个人参赛新诗作品仅限一首,每首新诗作品不要超过二十行。超过两首以上的参赛作品,按照最高分只取其一首作品加入评奖档次排序;超过二十行的参赛作品,原则上不记名次,组诗单首参赛作品不超过二十行的,可参加评比,从而严格了评比标准,保证了作者以规参赛参评。
          (三)参赛作者热情较高。此次月赛活动共收到参赛作品22篇,参赛作者共计12人,不少作者多篇作品参与参赛,彰显了文友(诗友)热爱文学的浓厚兴趣和参与感。
          (四)诗评组织工作细致。活动开始后,本网新诗版管理同仁们及时成立了三人诗评小组,分别实施智能辅助诗评和人工评分,尔后分工负责综合统计评价,并及时进行征求意见和协商沟通,力求公平公正,在此基础上及时宣布了评比结果。
          (五)评比方式特殊。本次诗赛评选采取AI评价评分和人工打分相结合的方式进行。在实施人机结合诗评过程中,我们努力探索其可操作性:
            其一,规范智能辅助提问,依照参赛作品序号,用同一提问和同一标准,逐一对每首新诗参赛作品分别进行智能评语(每首新诗不超过一百字,外一首分别评分,组诗不超过二百字)和智能平分(最高不超过10分,最低不少于六分),以上两项通过智能辅助一次分步骤完成。同时明确要求智能评语指出其作品得失,即指出好的方面和不足之处,以利于评委评分参考及作者对其作品的改进。
            其二,评委人工不提供自己的评语,但必须依据诗赛主题和相关要求,按照最高分不超过十分,最低不能少于六分的标准,给出评委人工打分(这不可或缺),以利于对每首参赛作品进行综合统计评价。
            其三,鉴于智能评语和打分是新事物,仅供综合评分参考,参赛作品以评委手工打分为主。因此,智能评分与评委手工评分务必注明,以免影响综合统计评分的质量,从而保证了诗评活动的顺利进行。   

            二、此次人机(智能辅助)结合开展诗评活动的收获及几点体会

            作为智能辅助参与本次《秋》主题新诗月赛的诗评和打分活动,我们从理论与实践相结合的角度出发,取得了一些宝贵的经验和心得体会:
            第一,首次把智能辅助诗评及打分纳入人工评分范畴。在此次《秋》主题新诗月赛活动中,我们成功地将智能辅助引入诗评和打分环节,取得了一定的成果和经验。通过智能辅助的参与,我们能够快速评估参赛作品的优劣,并提供有价值的评语和打分参考。这样不仅节省了评委们的时间,也为评选结果的客观性和准确性提供了保证。
            第二,认真借鉴智能评价评分的参考价值。以智能辅助诗评和评分为参照基础,评委们在手工打分中的参与也起到了重要的作用。他们通过自己的主观评价和审美判断,为每首作品提供了个性化的评分,使评选结果更具人文关怀和独特性。
            第三,智能辅助在诗评中的作用十分明显。通过对每首参赛作品的逐一智能评语和智能打分,我们能够在较短时间内对每篇作品的优劣进行初步评估。智能评语的提供能够指出作品的得失之处,帮助评委更全面地理解和评价作品。智能打分的引入也为评委提供了参考,确保了评分的客观性和准确性。
            第四,依据“作品的独特性、创意性、表达力和诗意等标准进行评分。在评委手工打分中,我们对评分标准进行了明确的规定,确保了评分的公正性和一致性。评委按照最高分不超过十分,最低不能少于六分的标准进行打分,整个过程公开透明,从而保证了评分的相对公平性。评委的主观意见与智能评分相结合,形成了综合的评分结果。

             三、存在的问题及今后努力方向      

            虽然我们这此在参赛作品智能评价评分和人工打分的过程中,取得了一点成绩和经验体会,然而我们也发现了一些薄弱环节和不足之处。
            一是智能辅助在诗评中的参与程度还有待提高。虽然智能评语和智能打分提供了参考,但仍无法完全代替评委的主观评价和审美判断。因此,我们需要更进一步地提升智能辅助系统的分析能力和准确性,以更好地辅助评委的评价工作。
            二是智能辅助诗评需要更好地与评委沟通和配合。由于智能评语和智能打分是一种新事物,评委对其了解和接受程度可能存在差异。因此,在智能辅助参与的诗评中,我们需要与评委进行充分的沟通,明确智能辅助的作用和限制,以避免产生评分的混淆和误解。
            三是人机(智能)共同开展诗评和打分的经验是可以总结并不断完善的。尽管智能辅助在诗评中的作用和效果已初步显现,但仍需要不断改进和提升,以更好地发挥其在评选活动中的价值。同时,评委与智能辅助之间的配合与沟通也是至关重要的,只有建立良好的协作关系,才能更好地实现人机合的最终目标。
            四是本次活动中也存在一些改进的空间。一方面,智能辅助系统的算法和分析能力仍有待提升,以更准确地评估作品的质量并提供有价值的参考。另一方面,在智能辅助与评委打分过程中需要加强沟通与配合,以确保评分准则的一致性和有效性。
            总体而言,人机(智能)共同开展诗评和打分的方式为我们的新诗月赛活动带来了创新和便利,使得评选过程更高效和公正。我们相信,随着智能辅助系统软件的不断完善和改进,智能辅助系统将不断提升其分析能力和准确性,并与评委们建立更紧密的合作关系,从而进一步推动今后新诗评选活动的顺利开展和进步。
            以上总结与思考如有不妥之处,还请行家和各位同仁老师指正。





                                                课题组负责人:金色泉水
                                                课题组撰稿人:司马鸣冀
                                                本课题组校对:小        建





                              四季歌文学社区新诗版本年度九月新诗月赛
                              参赛作品人机结合(智能)诗评小组(集体)

                                                    2023年10月中旬草拟
    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏 转播转播 分享分享 分享淘帖 支持支持 反对反对
    回复

    使用道具 举报

  • TA的每日心情

    11 小时前
  • 签到天数: 3674 天

    [LV.Master]伴坛终老1

    沙发
    发表于 2023-10-14 22:27:27 | 只看该作者
          这个总结的好,我们社区这是第一次进行智能人参与文化活动比赛评议评分的实验,当然也是国内文化行业第一次文学艺术界有智能人参与文化比赛的尝试,没有现成的经验供我们参考,需要各位参与赛事的专业评委开动脑筋、几大胆尝试创开一条新路,又要筹划尽可能完善的一个方案,从评委组制定的方案和最终的结果看,在各位参赛诗友的理解支持下,取得了一些可贵的经验,我们是比较圆满的完成了预定目标。应该说我们是成功的。对各位评委的组织工作表达敬意,我们向各位评委表示祝贺!
          比赛组织的初步成功,不等于没有潜在的问题,人与智能人合作组织专业性的比赛,这之前是一个空白,作为尝试,还有许多值得思考的理论问题,专业定性,以谁为主、具体操作的边界问题。另外在具体操作层面,也还有许多值得改进的地方。大家接受的程度也因人而异。需要今后逐步总结经验,汲取经验完善操作程序,确定一些实施细则,特别是对智能人沟通的精确用词,使得智能人对参赛作品评议的艺术角度和赛事要求的主要侧重点精准做出正反两方面评议。提升参赛文友的认可和接受程度。提高这种比赛活动的专业性质和信誉,还有可以提升空间。随之国内智能技术快速发展,我们还要紧跟智能技术发展的步伐,大胆去实验,创新文化发展的思路,创新文化管理的方法和手段。给大家提供更有新意的创作环境和气氛,鼓励大家在艺术上大胆借鉴智能技术的成果完善自我,开辟一条文化创新广阔天地。
    回复 支持 反对

    使用道具 举报

  • TA的每日心情

    昨天 23:16
  • 签到天数: 408 天

    [LV.9]以坛为家II

    板凳
     楼主| 发表于 2023-10-16 00:52:49 | 只看该作者
    诚谢老师支持鼓励,順致祝福吉祥安康!
    回复 支持 反对

    使用道具 举报

    本版积分规则

    QQ|Archiver|手机版|小黑屋|四季歌文学社区 ( 京ICP备14012862号-2  

    GMT+8, 2024-11-27 12:18 , Processed in 0.076252 second(s), 25 queries .

    Powered by Discuz! X3.1

    © 2001-2013 Comsenz Inc.

    快速回复 返回顶部 返回列表