Демократизація та карпентерія бенчмаркінгу ШІ
Автори: Gregor von Laszewski, Wesley Brewer, Jeyan Thiyagalingam, Juri Papay, Armstrong Foundjem, Piotr Luszczek, Murali Emani, Shirley V. Moore, Vijay Janapa Reddi, Matthew D. Sinclair, Sebastian Lobentanzer, Sujata Goswami, Benjamin Hawks, Marco Colombo, Nhan Tran, Christine R. Kirkpatrick, Abdulkareem Alsudais, Gregg Barrett, Tianhao Li, Kirsten Morehouse, Shivaram Venkataraman, Rutwik Jain, Kartik Mathur, Victor Lu, Tejinder Singh, Khojasteh Z. Mirza, Kongtao Chen, Sasidhar Kunapuli, Gavin Farrell, Renato Umeton, Geoffrey C. Fox
Опубліковано: 2025-12-15
Переглянути на arXiv →Анотація
Ця стаття виступає за динамічний та інклюзивний бенчмаркінг для забезпечення того, щоб оцінка ШІ відповідала його еволюції, підтримуючи відповідальне, відтворюване та доступне розгортання ШІ. Вона має на меті покращити способи оцінки систем ШІ для реальних застосувань та уможливити обґрунтовані, чутливі до контексту рішення.