
۵۹٪ از سختترین آزمونهای SWE-bench Verified بهدلیل خطاهای فنی شکست خوردند
تحلیلهای جدید نشان میدهد بنچمارکهای کدنویسی بهجای سنجش مهارت مهندسی، حافظه مدلها را اندازه میگیرند. تیمهای توسعه برای ارزیابی واقعی باید سه محور مستقلِ صحت، کاربردی بودن و…










