第三届大模型供应链研讨会（LLMSC@ICSE’27）
时间：2027年4月27日
地点：爱尔兰 都柏林
网站：https://llmsc.github.io/
论文提交：https://icse2027-llmsc.hotcrp.com/

LLMSC'27: Call for Skills

第三届大模型供应链国际研讨会（LLMSC 2027）将于2027年4月与软件工程国际会议 ICSE 2027 同期在爱尔兰都柏林举办。

此前，我们已发布本届研讨会的征稿通知，面向大模型与智能体供应链的分析、安全、可靠性与治理等方向，征集 Position Paper 和 Research Paper。

👉 此前征稿通知：https://mp.weixin.qq.com/s/NJ6G_UUP7rDZ09IJBRjnBQ（或点击底部阅读原文查看）

重点: 在原有征稿类型的基础上，LLMSC 2027 现新增 Agent Skills Track，作为本届研讨会征稿的补充。

Call for Skills 面向正在快速发展的 Agent Skills 生态，尝试探索一种新的学术成果形式：

本次补充征集不会替代原有的 Position Paper 和 Research Paper。作者可以根据成果形态，选择以下任一种投稿类型：

• Position Paper（1–4页）：适合具有创新性但尚未完全成熟的观点、构想或阶段性成果；

• Research Paper（4–8页）：适合技术研究、实证分析和实践报告等较为完整的研究成果；

• Skill Paper（2页）：适合已经形成可复用 Agent Skill，并具备初步实验结果的成果。

如果你的研究已经被封装成一个能够由 Agent 直接调用的 Skill，或者你希望用更加轻量、可执行和可复现的方式展示一项新能力，欢迎关注LLMSC'27。

01 为什么发起 Call for Skills?

长期以来，论文一直是学术成果最主要的表达和评价形式。研究者需要通过完整的背景介绍、相关工作、方法设计和实验分析，系统地说明一项研究的价值。

但随着生成式人工智能快速发展，论文写作和内容生成的门槛正在显著降低。一方面，AI 可以帮助研究者更高效地整理资料、润色语言和组织内容；另一方面，也出现了越来越多形式完整、篇幅充足，却缺少真实问题和技术创新的 “AI Slop”。

与此同时，持续增长的投稿数量也给同行评审系统带来了巨大压力。研究者需要投入大量时间完成论文写作，审稿人则需要在数量庞大、篇幅冗长的投稿中识别真正重要的问题和有效的贡献。

因此，我们也在持续思考一个问题：

智能体时代的学术成果，是否仍然需要依赖于传统论文的表达形式？

随着 Agent 逐渐具备信息检索、代码实现、工具调用、实验执行和结果分析等能力，或许未来的学术研究只需要提出一个真正值得解决的问题，再将它交给 Agent，就能够得到超越现有 SOTA 方法的解决方案。到了那个时候，我们可能不再需要撰写完整论文，只需要写清楚一份 Research Proposal。

当然，在这样的“AI 极乐末世”真正到来之前，传统论文仍然是学术交流不可替代的重要载体。但我们或许可以先做一些新的尝试，用一种更加直接和简洁的方式呈现研究成果，减少研究者在冗长写作和形式包装上的投入，也降低审稿人理解与核验成果的负担。

因此，LLMSC 2027 发起 Call for Skills，每份投稿仅需包含：

一篇不超过 2 页的短论文说明Research Proposal和Preliminary Results + 一个可验证的 Skill Artifact

02 我们希望收到什么样的 Skill？

本次征集中的 Skill，是指能够为 Agent 提供特定知识、方法或任务能力，并可被实际加载、调用和执行的可复用制品。

它可以是一套指导 Agent 完成专业任务的结构化指令，也可以进一步包含脚本、程序、配置文件、参考资料、测试数据或外部工具接口。其关键不在于采用某一种固定格式，而在于它能够将一种研究思路或专业能力封装起来，让 Agent 在具体任务中真正使用。

例如，一个 Skill 可以帮助 Agent：

• 发现、调用、测试或保护 MCP 服务；

• 识别恶意模型、提示词、工具或其他供应链组件；

• 分析智能体执行轨迹并定位任务失败原因；

我们不限制作 Skill 所使用的模型、框架或智能体平台。投稿可以面向 Claude Code、Codex、Cursor 等现有环境，也可以采用平台无关或自行设计的 Skill 格式，但需要提供清晰的安装、调用和验证方式。

Call for Skills所面向的主题也比较广泛（和Call for Paper的范围一致），只要你的 Skill 面向一个明确且有价值的LLMSC相关的研究问题，具备一定的创新性，并能够通过初步实验展示实际效果，都欢迎投稿。

03 投稿需要包含哪些材料？

每份 Skill Paper 投稿必须同时包含以下两部分。

1. 一篇不超过 2 页的短论文

短论文应使用英文撰写，并简洁说明：

• Research Problem：Skill 希望解决什么问题，为什么这个问题值得关注

• Skill Design：Skill 的核心思路、工作流程和实现方式

• Preliminary Results：实验如何开展，取得了什么结果

• Artifact Information：如何获取、安装、运行和验证 Skill Artifact

论文长度不超过 2 页，包含参考文献，并遵循 IEEE Conference Proceedings Format。LaTeX 用户请使用：

\documentclass[10pt,conference]{IEEEtran}

2. 一个可验证的 Skill Artifact

作者需同时提交一个能够由评审者实际获取和验证的 Skill Artifact。制品原则上应包含：

• Skill 的功能说明

• 完整的指令、脚本、配置或相关资源

• 安装方式与环境依赖与清晰的调用方法

• 用于复现初步结果的任务、数据或测试脚本

投稿阶段的论文、代码仓库、文档、文件路径、提交记录和制品元数据均需匿名。作者可以通过匿名代码仓库、匿名压缩包或其他匿名方式向评审者提供 Artifact。详情可参考 ICSE 2027 Open Science Policy。

04 初步实验需要做到什么程度？

Call for Skills 不要求与完整 Research Paper 相同规模的实验，但每份投稿都需要提供一组初步且可信的结果，说明该 Skill 在目标任务中确实具有价值。

作者可以通过实验回答以下一个或多个问题：

• 使用 Skill 后，Agent 的任务成功率是否有所提升？

• Skill 是否能够帮助 Agent 完成原本难以完成的专业任务？

• 相比通用提示词、现有 Skill、工具或工作流，是否取得了更好的效果？

• 是否减少了执行步骤、Token 消耗、运行时间或人工干预？

• 是否降低了错误操作、不安全行为或无效工具调用？

• 是否能够适用于不同模型、任务或运行环境？

05 Skill Paper 将如何评审？

Skill Paper将采用双盲评审，并引入“组织方预运行、审稿人复核”的验证流程。

• 组织方预运行。正式评审前，组织方将依据作者提供的安装说明、测试任务和评价方法，预先运行提交的Skill，记录运行环境、配置、执行日志和实验结果，并将这些材料提供给审稿人。我们计划采用统一的参考配置，例如Codex配合DeepSeek模型开展验证。对于依赖特定模型、框架或运行环境的Skill，作者应明确说明，组织方将结合其适用条件安排验证。

• 审稿人复核。审稿人将结合两页短论文、Skill Artifact和组织方提供的预运行记录，复核实验设置、运行结果及其是否支持论文中的主要主张，并可按需重新执行关键任务。

评审将重点关注以下方面：

• 问题价值：是否面向一个明确且值得解决的LLMSC相关研究问题。

• 有效性：初步实验与制品验证结果是否支持论文中的主要主张。

• 可复用性：Skill是否具有清晰的使用方式，能够被其他研究者或Agent继续使用。

06 录用后如何展示？

被录用的 Skill Paper 将在 LLMSC 2027 进行现场报告和演示。录用后，作者需要提交最终版本的论文，并公开或提供可长期访问的 Skill Artifact、使用文档和主要实验复现材料。

被录用论文如需进入 ICSE 2027 Workshop Proceedings，必须在研讨会上进行报告，且至少有一名作者完成 Workshop 注册。未完成注册或现场报告的论文可能被从论文集中移除。

07 投稿信息

本次 Agent Skills Track 与 LLMSC 2027 原有征稿使用相同的投稿系统和日期。

投稿要求

• 投稿类型：Skill Paper

• 论文长度：不超过 2 页，包含参考文献

• 论文格式：IEEE Conference Proceedings Format

• 评审方式：双盲评审

• 投稿系统：https://icse2027-llmsc.hotcrp.com/

重要日期（AoE）

• ⏰ 投稿截止：2026年11月13日

• 📅 录用通知：2026年12月11日

• 📌 终稿提交：2027年1月29日

• 🔆 研讨会召开：2027年4月27日

The End

如果你正在开发一个有趣、实用或具有研究价值的 Agent Skill，欢迎将它带到 LLMSC 2027。

✨ 期待看到你的 Skill，也期待和大家一起探索智能体时代新的学术成果形式！

研讨会网站：https://llmsc.github.io/
投稿系统：https://icse2027-llmsc.hotcrp.com/
联系邮箱：llmscworkshop@gmail.com