美赛模板LDMCM更新说明
本次更新主要是新增了对LLM的引用方式以及附录中2024美赛要求的Report on Use of AI.
注:以下翻译部分都来自于GPT-4,请注意其准确性,原文内容请访问美赛官网
政策内容
政策目的:鉴于大型语言模型和生成式AI技术的快速发展,该政策旨在为参赛团队、指导老师和评委提供更多的透明度和指导。政策适用于学生工作的所有方面,包括研究与开发模型(包括代码创造)到书面报告。
诚实透明:团队必须对使用AI工具的所有情况坦诚和透明。团队和提交作品的透明度越高,其工作就越有可能被完全信任、欣赏和正确使用。这种披露有助于理解智力工作的发展,并正确承认贡献。如果不公开和明确引用AI工具的作用,可能会导致可疑的段落和工作被识别为抄袭并取消资格。
AI工具的使用:解决问题不需要使用AI工具,尽管允许负责任地使用。COMAP认识到LLMs和生成式AI作为生产力工具的价值,它们可以帮助团队准备提交材料,例如生成结构的初始想法,或在总结、改写、语言润色等方面。在模型开发的许多任务中,人类的创造力和团队合作至关重要,而依赖AI工具会带来风险。因此,建议在使用这些技术进行模型选择和构建、协助创建代码、解释数据和模型结果以及得出科学结论等任务时要小心。
- LLMs和生成式AI的限制:
- 客观性:之前发布的包含种族主义、性别歧视或其他偏见的内容可能会在LLM生成的文本中出现,一些重要观点可能不会被代表。
- 准确性:LLMs可能会“幻觉”,即生成虚假内容,特别是在超出其领域或处理复杂或模棱两可的主题时。它们可能生成在语言上但不在科学上可信的内容,它们可能会搞错事实,并且已经显示出它们可以生成不存在的引用。一些LLM只训练了特定日期之前发布的内容,因此呈现出不完整的画面。
- 上下文理解:LLMs不能将人类理解应用于文本的上下文,特别是在处理习语表达、讽刺、幽默或隐喻语言时。这可能导致生成内容中的错误或误解。
- 训练数据:LLMs需要大量高质量的训练数据以达到最佳性能。然而,在某些领域或语言中,这样的数据可能不容易获得,从而限制了任何输出的有用性。
参赛团队的应该注意什么?
明确指出使用LLMs或其他AI工具:参赛团队在报告中必须明确指出他们使用了LLMs或其他AI工具,包括使用了哪个模型以及用途。要求使用文内引用和参考文献部分来做这个说明。此外,在25页解决方案之后附上使用AI的报告(下文将描述)。
验证内容和引用的准确性、有效性和适当性:团队需要验证由语言模型生成的内容和任何引用的准确性、有效性和适当性,并纠正任何错误或不一致。
提供引用和参考文献:参赛团队应该按照提供的指导提供引用和参考文献,并仔细检查引用确保它们是准确的并且正确引用。
意识到抄袭的潜在风险:由于LLMs可能会从其他来源复制大量文本,因此有抄袭的潜在风险。团队需要检查原始来源,确保他们没有抄袭别人的工作。
引用建议
文档和引用工具:参赛团队在使用任何工具时,需要仔细考虑如何进行文档记录和引用。随着越来越多的风格指南开始纳入AI工具的引用和参考政策,团队应当遵循这些指南来正确引用所使用的AI工具。
内文引用和参考部分:在25页的解决方案报告中,团队应使用内文引用,并在参考文献部分列出所有使用的AI工具。这要求团队在报告的相应部分清晰地标注使用的AI工具,包括工具的名称和用途。
报告页数限制:无论团队是否选择使用AI工具,主要解决方案报告的页数限制仍为25页。这意味着团队需要在这一页面限制内完成他们的主要报告。
使用AI的报告:如果团队选择使用AI工具,他们需要在报告的末尾新增一个标题为“使用AI的报告”(Report on Use of AI)的部分。这一新部分没有页面限制,并且不计入25页解决方案的页数限制内。这允许团队详细记录他们如何使用AI工具,包括使用的工具类型、用途和对解决方案的贡献,而不用担心会超过页面限制。
引用方式
新增了LLM的引用方式。以ChatGPT为例。只需使用\upcite{openai2024chatgpt}
命令即可(或\cite{openai2024chatgpt}
),具体改动请参见references.bib
文件。
效果如下:
此处引用了LLM.
[1] OpenAI. Chatgpt: Optimizing language models for dialogue, Feb 2024. Available online: https://openai.com/chatgpt (accessed on February 2nd, 2024).
Report on Use of AI
新增了2024美赛要求的Report on Use of AI,具体改动请参见附录部分,即Appendix C: Report on Use of AI.
采用了官方提供的格式:
- OpenAI ChatGPT (Nov 5, 2023 version, ChatGPT-4)
Query1:
<insert the exact wording you input into the AI tool>
Output:
<insert the complete output from the AI tool>
- OpenAI Ernie (Nov 5, 2023 version, Ernie 4.0)
Query1:
<insert the exact wording of any subsequent input into the AI tool>
Output:
<insert the complete output from the second query>
- Github CoPilot (Feb 3, 2024 version)
Query1:
<insert the exact wording you input into the AI tool>
Output:
<insert the complete output from the AI tool>
- Google Bard (Feb 2, 2024 version)
Query:
<insert the exact wording of your query>
Output:
<insert the complete output from the AI tool>
在书写时只需把LLM的问答替换掉<···>
中的内容即可。在导出ChaGPT的回答时,推荐一个chrome插件chatgpt-to-markdown,可以非常方便地把对话导出成md文本。
下载更新
参见LDMCM或1
git clone https://github.com/LeyuDame/LDMCM.git