外部精选
软件工程
#开发者实时流Hugging Face 推出 Harness Leaderboard 排行榜
来源标题:Hugging Face Harness Leaderboard
Hugging Face 上线 Harness Leaderboard,用于展示不同 harness 配置下的模型表现。页面代码显示,该榜单包含散点图、前沿线、成本区间和 logo 标识等可视化元素,并支持视图切换动画。
Hacker News 最新JoelNiklaus2026/11/13 · 4 天前30 分钟阅读
以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。
; if (old && old.front.join() !== sc.front.join()) g += ${fr(stairs(old.front.map(k => old.pts[k].c), old), '')}; g += ${fr(st, '')}; // 在 y 轴上方,避开绘图区(前沿标签使用其左上角)和成本范围。 g += ↖ 更优; g += ${rangeMarkup(sc, sc.ranges)}; Object.values(sc.pts).sort((a, b) => (faded(b) ? 1 : 0) - (faded(a) ? 1 : 0)).forEach(p => { const {c, P} = p, L = leadEnds(c, P, p.r0), x0 = p.side : ; const ring = faded(p) ? '' : ;
const logoEl = H(p.k).logo ? : ''; g +=
${dot}${ring}${logoEl}${p.name ?${esc(p.name)}: ''}; }); return g; // 两个视图之间在进度 e 处的场景(0 = 从,1 = 到):圆点中心、标签锚点和范围指示器以像素为单位移动; // 前沿和坐标轴交叉淡入淡出(animateChart)。 const lerp = (a, b, e) => a + (b - a) * e, lerpP = (a, b, e) => ({x: lerp(a.x, b.x, e), y: lerp(a.y, b.y, e)}); function mixScene(a, b, e) { const pts = {}; Object.entries(b.pts).forEach(([k, p]) => { const q = a.pts[k]; pts[k] = q ? {...p, c: lerpP(q.c, p.c, e), P: lerpP(q.P, p.P, e)} : p; }); Object.entries(a.pts).forEach(([k, q]) => { if (!pts[k]) pts[k] = q; }); const rg = (u, v) => Object.fromEntries(Object.keys(v).map(k => [k, typeof v[k] === 'number' ? lerp(u[k], v[k], e) : v[k]])); return {...b, pts, ranges: {x: rg(a.ranges.x, b.ranges.x), y: rg(a.ranges.y, b.ranges.y)}, sig: null}; const ANIM_MS = 650; // 低于此图表宽度时,标签只显示 logo,且图表可能高于首屏(窄窗口本来就会滚动):参见 chartScene 和 renderChart。 const COMPACT_W = 880; // 将图表从场景from移动到场景to,此时图表已绘制在最终位置:每一帧按剩余进度将每个圆点和标签回移, // 并重绘引导线、前沿和范围;旧坐标轴和前沿淡出,同时新坐标轴和前沿淡入。 function animateChart(svg, from, to) { const ease = t => t [g.dataset.k, {g, mark: g.querySelector('.mark'), lab: g.querySelector('.lab'), lead: g.querySelector('.lead')}])); const setFr = (sel, sc, op) => { const s = stairs(sc.front.map(k => sc.pts[k].c), sc), el = svg.querySelector(sel); if (!el) return; el.setAttribute('opacity', op); el.querySelectorAll('path').forEach(p => p.setAttribute('d', p.classList.contains('front') ? s.line : s.area)); }; const frame = e => { const sc = mixScene(from, to, e), old = {...from, pts: Object.fromEntries(from.front.map(k => [k, sc.pts[k] || from.pts[k]]))}; Object.entries(els).forEach(([k, el]) => { const p = sc.pts[k], t = to.pts[k]; if (!from.pts[k]) { el.g.style.opacity = e; return; } el.mark.setAttribute('transform',translate(${p.c.x - t.c.x} ${p.c.y - t.c.y})); el.lab.setAttribute('transform',translate(${p.P.x - t.P.x} ${p.P.y - t.P.y})); Object.entries(leadEnds(p.c, p.P, t.r0)).forEach(([a, v]) => el.lead.setAttribute(a, v)); }); setFr('.fr-new', {...to, pts: sc.pts}, svg.querySelector('.fr-old') ? e : 1); setFr('.fr-old', old, 1 - e); const ax = svg.querySelector('.axes.old'); if (ax) { ax.setAttribute('opacity', 1 - e); svg.querySelector('.axes:not(.old)').setAttribute('opacity', e); } svg.querySelector('.ranges').innerHTML = rangeMarkup(to, sc.ranges); }; const step = now => { const e = ease(Math.min(1, (now - t0) / ANIM_MS)); S.anim.e = e; frame(e); if (e el.remove()); S.anim = null; }; S.anim = {from, to, e: 0, raf: requestAnimationFrame(step)}; frame(0); // 保持悬停卡片在屏幕内:位于光标右侧和下方,溢出时翻转到左侧或上方,绝不位于吸顶栏下方。卡片定位在其面板内部。 function placeTip(tip, ev) { const box = tip.parentElement.getBoundingClientRect(), tw = tip.offsetWidth, th = tip.offsetHeight, bar = document.querySelector('.topbar').getBoundingClientRect().bottom + 4; let lx = ev.clientX + 16, ly = ev.clientY + 16; if (lx + tw > window.innerWidth - 8) lx = Math.max(8, ev.clientX - tw - 16); if (ly + th > window.innerHeight - 8) ly = Math.max(bar, Math.min(ev.clientY - th - 16, window.innerHeight - 8 - th)); tip.style.left = (lx - box.left) + 'px'; tip.style.top = (ly - box.top) + 'px'; tip.style.opacity = 1; function renderChart(animate = true) { const svg = document.getElementById('chart'), tip = document.getElementById('tip'); tip.style.opacity = 0; const rs = rows(), pts = rs.filter(r => r.x != null && r.x > 0); // 空心圆点提示仅在绘制部分 harness 时显示(Joel,2026-11-02)。 document.getElementById('legend-dots').textContent = '淡化圆点表示被支配' + (pts.some(p => p.partial) ? ';空心圆点表示部分结果' : ''); const W = svg.parentElement.clientWidth - 44; const Hh = Math.round(W ${S.data.debug ?暂无 ${esc(S.stage)} 结果。: '暂无结果。完整基准测试结果出来后,将显示在这里。'}; return; } const front = pareto(rs); // 每个名称的渲染宽度(网页字体加载后图表会重新渲染),因此标签框和下划线在名称结束处停止。 const probe = document.createElementNS('http://www.w3.org/2000/svg', 'g'); probe.innerHTML = pts.map(p =>${esc(H(p.k).display)}).join(''); svg.appendChild(probe); const nameW = Object.fromEntries([...probe.querySelectorAll('text')].map((t, i) => [pts[i].k, t.getComputedTextLength()])); probe.remove(); const sc = chartScene(W, Hh, pts, front, nameW); const move = animate && was && was.W === W && was.Hh === Hh && was.sig !== sc.sig && !matchMedia('(prefers-reduced-motion: reduce)').matches; svg.innerHTML = chartMarkup(sc, move ? was : null); S.scene = sc; if (move) animateChart(svg, was, sc); svg.querySelectorAll('.pt').forEach(el => { const p = pts.find(q => q.k === el.dataset.k), h = p.h, fx = XS[S.x].fmt; el.onmousemove = ev => { const cur = S.y === 'macro' ? h : h.benchmarks[S.y]; const per = Object.entries(h.benchmarks).sort().map(([b, c]) =>${esc(B(b).short)}${pct(c.rate)} (${c.n_tasks}/${c.n_tasks_expected} tasks) `).join('')
(原文较长,此处译出前 6000 字,完整内容请点「打开原文」。)
正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。