arXiv · AI· Yujun Huang, Yuwei Zhang, Yi Zhou, Shanshan Wu, Xiang Chen, Lina Gong·· 10 天前AI 评分26
RealEmbedBench: 面向真实应用层嵌入式软件任务的 LLM 基准
RealEmbedBench: Benchmarking LLMs on Real-World Application-Layer Embedded Software Tasks
AI 导读
RealEmbedBench 发布 5142 个样本的基准测试,评估 6 款 LLM 在应用层嵌入式软件开发中的表现,涵盖代码生成、状态机建模及跨 OS 代码翻译任务。
来源:arXiv · AI · arxiv.org