Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Show HN: Real Design Benchmark – comparing real products with AI designs

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

62 RADAR
Research UI/UX Benchmark · 1 nguồn đối chiếu · 2026-10-15 05:31:11 +0000 UTC

Show HN: Real Design Benchmark – comparing real products with AI designs

Nguồn: Hacker News AI
↗

Real Design Benchmark là thử nghiệm dạng game do Adam Ginzberg (đồng sáng lập Subframe) phát triển để so sánh thiết kế giao diện thực tế với thiết kế do AI tạo ra. AI nhận ngữ cảnh gồm 4 ảnh màn hình, icon, font và brief để sinh HTML. Kết quả sơ bộ từ vài nghìn lượt bình chọn cho thấy 57% người dùng thích thiết kế của AI hơn sản phẩm thật và chỉ 59% nhận diện đúng thiết kế AI.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Thử nghiệm cung cấp bằng chứng thực nghiệm cho thấy AI có thể tạo ra các giao diện UI được người dùng đánh giá cao hơn cả sản phẩm thực tế trong thử nghiệm mù. Điều này khẳng định tiềm năng ứng dụng AI vào quy trình thiết kế code-first và tự động hóa dựng giao diện frontend theo design system có sẵn.

Developer 70
Business 67
Novelty 75
Actionable 68

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Hi HN, I'm Adam Ginzberg, one of the cofounders of Subframe, a code-first design tool. One of the things I'm really curious about is understanding LLM performance on subjective domains like design. As an experiment I built this game which presents two designs of the same screen, one of which was generated by AI. First you pick which one you like better and then which one you think was made by AI. Most design work happens in an existing product, so we set up this game to test that. As context, the AI gets 4 screenshots from the existing product, the product's icons + fonts, and a written brief about the screen it is asked to build. It then writes HTML which is screenshotted identically to the real screen. To get the data, we signed up for the products with test accounts and added dummy data. All of the inputs were manually checked to make sure nothing about the target screen was leaked in the prompt. You can read more about the methodology at https://www.realdesignbenchmark.com/methodology . After a few thousand submissions, the surprising result is that people prefer the AI design - 57% prefer AI, 33% prefer the real design, 10% say they are about the same. People are also not great at identifying the AI design, only 59% get it right. The initial results were all generated with Opus 5.5 (medium effort). We just added GPT-6.1 Sol (medium effort) tonight. Give the game a try. Feedback on the approach is appreciated. Or any ideas on what we might improve or try next. Comments URL: https://news.ycombinator.com/item?id=50099581 Points: 1 # Comments: 0

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-15 12:59:39 +0000 UTC
{"tags": ["AI Design", "UI/UX", "LLM Benchmark", "Subframe", "Frontend", "HTML Generation"], "risks": ["Thiết kế ảnh chụp tĩnh từ HTML chưa phản ánh được khả năng tương tác, tính tương thích responsive và logic xử lý phức tạp của sản phẩm thực tế.", "Tính chủ quan và độ lệch trong tệp người tham gia thử nghiệm có thể không đại diện chính xác cho trải nghiệm người dùng thực tế lâu dài.", "Cần kiểm soát chặt chẽ quy trình prompt để tránh rò rỉ thông tin màn hình đích hoặc làm sai lệch kết quả benchmark."], "category": "Research", "entities": ["Subframe", "Adam Ginzberg", "Opus 5.5", "GPT-6.1 Sol", "Real Design Benchmark", "Hacker News"], "summary_vi": "Real Design Benchmark là thử nghiệm dạng game do Adam Ginzberg (đồng sáng lập Subframe) phát triển để so sánh thiết kế giao diện thực tế với thiết kế do AI tạo ra. AI nhận ngữ cảnh gồm 4 ảnh màn hình, icon, font và brief để sinh HTML. Kết quả sơ bộ từ vài nghìn lượt bình chọn cho thấy 57% người dùng thích thiết kế của AI hơn sản phẩm thật và chỉ 59% nhận diện đúng thiết kế AI.", "key_changes": ["Adam Ginzberg (đồng sáng lập Subframe) ra mắt Real Design Benchmark nhằm đánh giá định lượng khả năng thiết kế giao diện của LLM trên các miền chủ quan.", "AI được cung cấp ngữ cảnh gồm 4 ảnh chụp màn hình sản phẩm thực tế, font chữ, icon và bản mô tả yêu cầu (brief), sau đó tự sinh mã HTML để render ảnh đối chiếu.", "Kết quả khảo sát mù sau vài nghìn lượt thử nghiệm cho thấy 57% người tham gia ưa thích thiết kế do AI tạo ra hơn, 33% chọn thiết kế thực tế và 10% đánh giá ngang nhau.", "Khả năng phân biệt thiết kế do AI tạo ra của con người còn hạn chế, chỉ có 59% lượt đoán chính xác.", "Thử nghiệm ban đầu được thực hiện với mô hình Opus 5.5 và vừa bổ sung thêm mô hình GPT-6.1 Sol (cùng ở mức medium effort)."], "sub_category": "UI/UX Benchmark", "novelty_score": 75, "business_score": 70, "research_score": 78, "why_it_matters": "Thử nghiệm cung cấp bằng chứng thực nghiệm cho thấy AI có thể tạo ra các giao diện UI được người dùng đánh giá cao hơn cả sản phẩm thực tế trong thử nghiệm mù. Điều này khẳng định tiềm năng ứng dụng AI vào quy trình thiết kế code-first và tự động hóa dựng giao diện frontend theo design system có sẵn.", "developer_score": 75, "importance_score": 72, "possible_use_cases": ["Đánh giá và so chuẩn khách quan năng lực thiết kế giao diện UI/UX của các mô hình ngôn ngữ lớn và mô hình đa phương thức.", "Tự động hóa bước tạo bản mẫu (prototyping) và layout HTML/CSS ban đầu dựa trên design system sẵn có của doanh nghiệp.", "Thực hiện khảo sát thị hiếu và A/B testing mù để lựa chọn phương án thiết kế giao diện tối ưu trước khi triển khai chính thức."], "actionability_score": 68}