TabbitBlog

HY4 Flash 리뷰: 벤치마크가 보여주는 것과 놓치는 것

Tencent의 내부 평가와 Plotly의 단일 분석 벤치마크를 비교하고 HY4 Flash의 실패 유형과 근거가 있는 사용처를 정리합니다.

이 글의 목차
  1. 핵심 요약
  2. HY4 Flash 근거 비교
  3. 실패 항목에서 알 수 있는 점
  4. 출시 직후 커뮤니티 질문
  5. 결론: 검증하기 쉬운 작업부터

HY4 Flash의 공개 근거는 유망하지만 범위가 제한적입니다. Plotly는 DataAnalyticsBench 단일 실행에서 39/43, 비용 $0.13, 문제당 중앙값 29초라고 보고했습니다. 4개를 틀렸고 그중 3개는 숨은 패턴 문제였습니다. Tencent 내부 결과도 사무 업무 자료를 제공하지만 공급자 자체 평가입니다. 이 글은 저자의 직접 시험이나 Tabbit 실행을 포함하지 않습니다.

핵심 질문은 어떤 작업에서 공개된 실패 가능성을 감수하고 낮은 API 단가를 활용할 수 있는가입니다. Tencent는 일상 작업에는 Flash, 장기 소프트웨어 개발에는 HY4를 권합니다. HY4 Flash 가격 안내와 HY4와의 비교를 함께 확인하세요.

핵심 요약

  • Plotly의 1회 테스트는 39/43이었고 전체 문제는 공개되지 않았습니다.

  • 4개 실패는 숨은 패턴 3개와 통계 함정 1개였습니다.

  • Tencent의 85명·259개 작업 WorkBuddy 블라인드 테스트는 독립 재현이 아닙니다.

  • Reddit의 같은 산술 작업 보고에서는 세 모델 모두 정답이었지만 DeepSeek가 더 빨랐습니다.

  • 중요한 작업은 고정된 기준으로 결과를 확인하세요.

HY4 Flash 근거 비교

근거결과뒷받침하는 내용한계
Plotly DataAnalyticsBench39/43, $0.13, 중앙값 29초/문제한 데이터 분석 에이전트 설정비공개 문제, 1회 실행
Tencent WorkIndex사무 업무 결과, DeepSeek 1017 대비 1/8 비용 주장Tencent의 일상 작업 포지션내부 평가 방식
WorkBuddy 블라인드 평가사용자 85명, 작업 259개, 범주 27개특정 제품 안의 선호도분산·독립 재현 없음
Reddit 광고 계산세 모델 모두 정답, DeepSeek 7초·Flash 19초한 차례 개인 비교사용량과 원시 로그 없음

Plotly는 동일한 하네스를 사용했지만 비공개 풍력 데이터셋에서 모델마다 한 번만 실행했습니다. HY4는 42/43, $2.11, 문제당 117초였습니다. 이는 해당 시험 안의 비용과 품질 비교이지 Flash가 항상 네 배 빠르거나 16분의 1 가격이라는 뜻은 아닙니다.

실패 항목에서 알 수 있는 점

실패 세 건은 모델이 직접 데이터를 탐색해 숨겨진 패턴을 찾아야 했고, 나머지는 통계 임계값 판단이었습니다. 기본 계산이 맞더라도 예상하지 못한 이상을 찾는 능력은 별도로 검증해야 합니다.

작업시작할 때 고려할 점의존 전 확인
반복 계산·문서 추출범위를 정한 작은 시험기준 답과 대조
모호한 질문Plotly에서 5/5 보고자체 데이터로 반복
숨은 패턴·이상 탐지주의: Plotly에서 2/5추가 검토 또는 두 번째 모델
장기 소프트웨어 개발Tencent는 HY4 권고전체 도구 흐름과 결과물 검증

Tencent는 150 tokens/s 초과 속도와 Max 추론·피크 가격 조건에서 DeepSeek V4.1 Flash 1017의 1/8 작업 비용을 주장합니다. 이는 선택된 내부 평가에 대한 수치입니다. Plotly 독립 평가는 방법을 더 공개했지만 전체 문항은 비공개입니다.

출시 직후 커뮤니티 질문

Reddit 사용자는 “does it pick the right tool or just guess”라고 물었습니다. 실패 보고는 아니지만 도구 선택에 대한 우려를 보여줍니다. 다른 참여자는 오픈 웨이트를 물었고 Tencent는 향후 공개 계획을 밝혔습니다. 토론 보기。

별도의 WorkBuddy 광고 계산 비교에서 작성자는 “DeepSeek finished in 7s. Hy4 and GLM both showed 19s.”라고 보고했습니다. 세 모델 모두 계산이 맞았다고 했지만 토큰 사용량과 원시 출력은 공개하지 않았습니다. 원문。

WorkBuddy 광고 지표 계산과 HY4 Flash 시간을 보여주는 Reddit 게시물 이미지
Reddit에 올라온 한 번의 비교입니다. 청구액이나 반복 측정 결과는 아닙니다.

결론: 검증하기 쉬운 작업부터

반복적이고 결과 확인이 쉬우며 TokenHub 단가가 중요하다면 통제된 시험을 해볼 만합니다. Plotly의 숨은 패턴 실패는 자유형 분석에 추가 검토가 필요하다는 뜻입니다. DeepSeek V4.1 Flash와 비교하고 요금 안내를 참고하세요.

모델 API가 브라우저 접근을 제공하지는 않습니다. HY4 Flash 자료 (English), Tencent Hy4 브라우저 작업 흐름, DeepSeek V4.1 Flash 브라우저 작업 흐름, DeepSeek Harness 안내, Feishu Base 사례, Tabbit CLI 안내, 첫 브라우저 작업 점검표를 볼 수 있습니다.

Tabbit 브라우저에서 Hy4 Flash을 사용할 수 있습니다. Tabbit을 다운로드한 뒤 채팅의 모델 목록에서 Hy4 Flash을 선택해 사용해 보세요.

Tabbit Browser

자주 묻는 질문

독립 테스트에서 HY4 Flash는 어떤 결과를 보였나요?

Plotly는 비공개 DataAnalyticsBench 1회 실행에서 43문제 중 39문제, 비용 $0.13, 문제당 중앙값 29초를 보고했습니다. 일반적인 성공률로 해석할 수는 없습니다.

HY4 Flash가 HY4보다 나은가요?

Plotly의 단일 시험에서는 HY4가 42/43, Flash가 39/43이었습니다. Flash가 그 시험에서 더 저렴하고 빨랐지만 모든 작업에 적용되지는 않습니다.

HY4 Flash는 이미 오픈소스인가요?

Tencent는 오픈 웨이트 공개 계획을 밝혔지만 출시일은 제시하지 않았습니다. 로컬 배포를 계획하기 전에 실제 가중치와 라이선스가 공개됐는지 확인하세요.

벤치마크가 도구 호출 신뢰성을 증명하나요?

Plotly는 여러 차례 도구를 부르는 분석 에이전트를 테스트했지만 비공개 벤치마크만으로 다른 클라이언트의 신뢰성을 입증할 수 없습니다. Reddit에서도 도구 루프에 대한 질문이 있었습니다.

Tabbit에서 HY4 Flash를 쓸 수 있나요?

Tabbit 브라우저에서 Hy4 Flash을 사용할 수 있습니다. Tabbit을 다운로드한 뒤 채팅의 모델 목록에서 Hy4 Flash을 선택해 사용해 보세요.

다음 단계

Tabbit 과 함께 일하세요.

탭 간 조사를 하고, 반복적인 브라우저 작업을 자동화하며, 모든 맥락을 손이 닿는 곳에 두세요.