Cho Opus 5.5 build cùng một app ở mọi mức effort

Cùng một prompt dựng hội nghị 3D, chạy Opus 5.5 ở sáu mức effort rồi so chất lượng, thời gian, chi phí API, token và số check (video 24/09/2026).

Đã duyệt độc lập · cập nhật 19/10/2026 · 27 min

1. Một prompt, sáu mức effort

Nate Herk mở video bằng cách đọc liền năm lần cái tên "Opus 5.5". Theo anh, tính đến lúc video đăng ngày 24/09/2026, model này có mặt ở khắp nơi, và có lý do chính đáng: nó thông minh, nó rẻ, nó có "gu" (taste) rất tốt, nói chung là một model AI xuất sắc. Lúc anh nói câu đó, màn hình lướt qua vài bài đăng trên X của người khác khoe những thứ họ làm bằng Opus 5.5: một mô hình kiến trúc 3D đi từ bản phác thảo tới ngôi nhà hoàn chỉnh, một nhân vật vẽ tay, một cảnh đảo nhiệt đới dựng bằng 3D.

Nate Herk nói trước camera, phía sau là chữ AIS phát sáng
Nate Herk giới thiệu thí nghiệm trước camera, sau lưng là logo neon AIS của cộng đồng anh.

Nhưng với mọi model AI, người dùng luôn phải chọn mức effort: low, medium, high, extra, max hoặc ultracode. Vì vậy trong video này, Nate đưa cho Opus 5.5 đúng cùng một prompt, chạy nó ở từng mức effort một, rồi so sánh kết quả. Anh sẽ xem chất lượng thực tế của từng sản phẩm, nhưng cũng đo thêm năm thứ: mỗi lần chạy mất bao lâu, tốn bao nhiêu tiền nếu tính theo giá API, tổng số token, agent đã chạy bao nhiêu lượt kiểm tra (check), và nó đã hỏi lại anh bao nhiêu câu trong suốt quá trình.

Thanh trượt Effort trong giao diện Claude, đang đặt ở Low, cạnh nhãn Opus 5.5
Thanh chọn effort trong giao diện Claude: kéo về trái là "Faster", kéo về phải là "Smarter". Ở đây thanh đang đặt ở Low, model là Opus 5.5.

Nate nói trước rằng kết quả hoàn toàn không như anh dự đoán, và anh rất nóng lòng muốn chia sẻ. Anh không muốn mất thêm thời gian, nên đi thẳng vào phần chính.

2. Prompt: biến một sự kiện online thành hội nghị 3D

Trước hết, Nate cho người xem thấy chính xác prompt đã đưa cho từng agent. Anh mở phần file của project, mở file markdown tên PROMPT.md. Đây là nội dung anh nạp vào qua lệnh /goal (slash goal), tức là giao cho agent một mục tiêu để tự chạy tới khi xong.

File PROMPT.md mở trong editor, chứa yêu cầu dựng thế giới 3D cho sự kiện AIS Live
File PROMPT.md: yêu cầu dựng một thế giới 3D có thể đi lại ở góc nhìn thứ ba, dựa trên toàn bộ video quay lại của sự kiện AIS Live.

Nội dung prompt như sau. Bản dưới đây chép từ màn hình; đường link thư mục video và tên dịch vụ tạo ảnh/video được thay bằng chỗ trống để bạn tự điền.

You need to create me a 3D world that is a realistic tech conference that I can walk around in third-person view. You will look at this folder, which is my event recording assets from AIS Live. <link to the recordings folder>

This folder has all of the recordings because this event was virtual. And essentially your goal here is to take this event and turn it into a 3D explorable world to make me feel like this wasn't actually a virtual event and to make it feel like I'm right there in person at this AIS Live event. Meaning we have different rooms, different tracks, different stages based on the way that AIS Live was actually conducted.

Feel free to use <image/video generation service> if you need to generate any images or videos. You can use anything else at your disposal inside of my Herk-2 project.

You'll be judged on creativity, design, physics, and the overall feel as I explore the 3D world that you build. When you are done and everything has been tested and iterated on and you have an output that you are proud to deliver to me, I'll put the localhost that I can explore this world on as well as a concise message of how you verified everything. I want to know the exact numbers in this verification process.

Nate giải thích từng phần. Agent phải tạo cho anh một thế giới 3D là một hội nghị công nghệ trông như thật, nơi anh có thể đi lại ở góc nhìn thứ ba (third-person view). Nguồn liệu là thư mục video quay lại sự kiện AIS Live: một thư mục Frame.io chứa 105 GB video. AIS Live là một sự kiện hoàn toàn online, mọi thứ đều được quay lại và toàn bộ video nằm trong thư mục đó.

Mục tiêu của agent là lấy sự kiện ấy và biến nó thành một thế giới 3D có thể khám phá, khiến Nate có cảm giác như anh thật sự đã đi dự một hội nghị trực tiếp, với nhiều phòng, nhiều track, nhiều sân khấu khác nhau, "vân vân và vân vân". Agent được tự do dùng một dịch vụ API trung gian cho model nếu cần tạo ảnh hoặc video, và được dùng bất cứ thứ gì khác trong project Herk-2 của anh, thứ anh gọi là hệ điều hành AI (AI operating system) của mình.

Cuối cùng anh nói rõ agent sẽ được chấm theo bốn tiêu chí: sáng tạo, thiết kế, vật lý, và cảm giác tổng thể khi anh đi khám phá thế giới 3D đó. Về cơ bản, hướng dẫn chỉ có vậy.

3. Low: thế giới quá sáng, người biến mất

Ở cột bên trái của giao diện, Nate cho thấy anh đã chạy prompt này qua tất cả các mức effort. Anh bắt đầu từ low rồi đi dần lên tới Ultracode.

Bản low mở ra với màn hình chào "AIS Live, AI Services Summit, in person, finally" và cho phép bấm vào để vào trong. Nhận xét ngay lúc mở của Nate: bản này không giống thương hiệu chút nào. Logo không phải logo AIS Live, màu sắc cũng không phải màu của họ, nên anh không thích lắm. Dù vậy, anh vẫn bước vào xem.

Sảnh Registration trong bản Low, ánh sáng trắng chói lóa khắp sàn
Bản Low: khu Registration (nhận badge GA và VIP) bị ánh sáng trắng phủ gần hết, góc phải trên là bản đồ các khu vực.

Ngay lập tức, mọi thứ quá sáng. Có một bản đồ ở góc trên bên phải. Phía sau có một thành phố, ban đầu anh không nhận ra là thành phố nào, rồi nhận ra đó là Chicago, khá hay vì anh sống ở Chicago. Bản đồ ở góc phải cho thấy các khu: lobby, expo hall, VIP lounge, main stage. Bản đồ còn hiển thị vị trí của mọi người khác, và đồng bộ theo thời gian thực.

Agent cũng biết lịch trình sự kiện: có khu registration, có Day 1 với keynote của Hyperagent và một buổi live debrief, rồi tới Day 2. Nghĩa là nó đã tìm ra agenda, một điểm cộng. Trong sảnh có mấy quả bóng nhỏ mà Nate hy vọng có thể đá đi được.

Rồi vấn đề xuất hiện: khi anh đi về một phía, toàn bộ người trong cảnh biến mất. Nate nhận xét "rất tệ, rất tệ". Anh thử chạy nhanh hơn và thấy nhân vật đi nhanh được một chút. Anh đi tới khu đồ lưu niệm (swag), rồi tới các booth: có booth chứng chỉ AIS+ và một booth sản phẩm, tức là agent đã dựng lại đúng những booth mà sự kiện online có thật. Có cả một góc nhỏ để chụp ảnh.

Ở Room C đang có một workshop, nhưng màn hình chỉ là ảnh tĩnh, người trình bày không hề chuyển động. Những người xung quanh cứ biến mất, Nate đùa rằng chắc họ là ma. Sang Room A, có buổi "Your first 30 days in automation", nhưng một lần nữa cũng chỉ là ảnh tĩnh, còn người thì chập chờn, nên không tốt.

4. Low: main stage kiểu slideshow và các con số

Nate đi tới main stage. Sân khấu trông đúng là một sân khấu chính, nhưng người trong khán phòng bị glitch rất nặng. Video trên màn hình có vẻ chuyển động: anh thấy mặt mình, thấy một diễn giả khác, rồi họ biến mất. Anh không rõ chuyện gì xảy ra; nhìn kỹ thì nó giống một slideshow hơn, thực ra không có gì đang được phát cả.

Đi tiếp, anh thấy thêm booth: Hyperagent, Claude Code, thêm một khu swag nữa. Room B là phần của một diễn giả khác, và anh đoán nó cũng y hệt các phòng trước. Có quầy cà phê. Khu VIP lounge ghi "VIP access only", ý tưởng thì hay nhưng bên trong không có gì diễn ra, còn màn hình thì quá sáng. Tới đây Nate cho rằng người xem đã hiểu "vibe" của Opus 5.5 ở mức low.

Sau đó là phần anh gọi là thú vị. Anh hỏi người xem đoán xem bản này chạy bao lâu và tốn bao nhiêu. Theo video đăng ngày 24/09/2026, bản low chạy 16 phút 43 giây, và nếu tính theo giá API thì tốn $3.91. Nate nói rõ anh dùng gói subscription của mình, nhưng để so sánh thì quy hết ra giá API. Tổng số token là khoảng 191.000 (bảng ghi 191.3K). Agent đã chạy 22 lượt check: 22 lần nó mở trình duyệt và chạy các loại kiểm tra khác nhau, tức 22 nhóm kiểm tra. Còn số câu hỏi nó hỏi lại Nate trong suốt lần chạy /goal này: 0.

16m 43srun time $3.91API cost 191.3Ktokens 22checks 0questions Low effort, theo video đăng ngày 24/09/2026
Hình 4.1Năm chỉ số của bản Low: nhanh và rẻ nhất trong sáu lần chạy, 22 check và không hỏi lại câu nào (số liệu theo video đăng ngày 24/09/2026).

5. Medium: đúng thương hiệu, nhân vật biết phản ứng

Tiếp theo, Nate mở bản medium. Màn hình chào hiện tên "Nate Herk" trên một chiếc badge của anh, và lần này có đúng thương hiệu AIS Live. Theo anh, nó đã tốt hơn rõ: trông như agent dùng đúng bộ màu theo brand guideline của họ. Badge ghi Day 1 là ngày build, Day 2 là ngày earn, kèm phần VIP. Anh bấm "Enter the venue" để vào.

Màn hình chào của bản Medium: badge AIS Live ghi NATE HERK, nút Enter the venue và danh sách phím điều khiển
Bản Medium mở bằng một badge AIS Live đúng thương hiệu, ghi "34 real sessions loaded · 1058 attendees seated", kèm hướng dẫn phím: WASD để đi, Shift để chạy, Space để nhảy, F để đá, X để ngồi, V để vỗ tay.

Vào trong, không khí khá giống bản trước, cũng có một thành phố ở phía sau. Nhưng thành phố này không giống Chicago; Nate cho rằng nó là một thành phố bịa ra, và thấy buồn cười vì cả hai bản đều chọn đặt một thành phố ở phía sau.

Anh thử chạy nhanh hơn, rồi ngạc nhiên: những người trong cảnh tương tác với anh. Khi anh đi tới gần một người, người đó giơ tay lên. Rồi ngay sau đó, người ấy quay đi như không muốn dính dáng gì tới anh nữa. Nate đoán những con robot nhỏ này đang tự ra quyết định. Anh tự hỏi liệu chúng có đang dùng JEV không; chắc là không, vì anh không bảo agent làm vậy. Nhưng rồi anh nhớ ra key JEV của mình có nằm trong project, nên anh không chắc, có thể nó đã dùng thật.

Anh đi qua Workshop Room C, "Agents Lab". Lần này video được phát thật: một diễn giả đang trình bày trên màn hình, và mọi người trong phòng đều đang làm việc trên laptop. Không ai bị glitch. Nate thấy cái này khá hay. Anh cũng để ý badge của mình được đeo trên ngực nhân vật, một chi tiết dễ thương. Bản đồ vẫn nằm ở góc trên bên phải.

Anh đi sang expo hall. Ở đây có một booth sản phẩm, và màn hình của booth đang phát thật: đó là video Nate và đồng đội nói về sản phẩm đó trong sự kiện. Một màn hình khác phát video Nate cùng một thành viên team nói về chương trình chứng chỉ của họ. Logo AIS+ được đặt ở phía sau, theo anh là ở một vị trí hơi lạ.

Có một bức tường "Speaker slides and takeaways": đây là toàn bộ tài liệu họ phát ra sau sự kiện, tất cả được treo ở đó. Có khu "Community Spotlight", nơi một thành viên cộng đồng kể về hợp đồng anh ấy vừa chốt, video phát trực tiếp và những người đứng xem trông rất chăm chú. Rồi tới khu Hyperagent; Nate nói đó chính là chỗ mấy người giơ tay chào mà anh nhắc tới, và chỉ cho người xem một người lại vừa giơ tay lần nữa.

6. Medium: main stage, VIP lounge và các con số

Nate quay ra main lobby. Ở đây có quầy cà phê và một logo lớn, lần này là logo thật, dù vẫn hơi quá sáng. Anh đi vào foundation track, nơi có hai buổi training của hai diễn giả khác nhau. Sang phòng bên cạnh là advanced track, với hai diễn giả khác đang nói về những chủ đề nâng cao.

Rồi anh đi xem main stage. Trên đường, anh thấy một video của chính mình ở phía trên và tự hỏi đó có phải khu VIP không; anh ghi nhớ để quay lại xem sau. Main stage trông rất, rất đẹp: sân khấu lớn, khoảng bốn người ngồi trên đó, ba màn hình đang chiếu keynote của Hyperagent. Nate thử hỏi liệu mình có được lên sân khấu không, và game cho phép. Anh đứng trên sân khấu, đùa "nào mọi người, chụp một tấm selfie", và cố đưa mọi người vào khung hình phía sau. Anh thấy khá hay, nhưng không phải ghế nào cũng có người ngồi, nên phần đó còn cần cải thiện.

Anh chạy lại chỗ VIP vừa thấy. Đó là VIP lounge, và Nate thấy nó giống như đang ở sân bay. Trong đó có các buổi VIP, có buổi "VIP Q&A with Nate" với video đang phát trực tiếp ngay tại chỗ, và có cả một quầy bar. Anh đánh giá đây là một output khá tốt.

Về số liệu, theo video đăng ngày 24/09/2026: bản medium chạy 1 giờ 13 phút, tốn $12.44 nếu tính theo giá API, chạy 23 check và một lần nữa hỏi lại tổng cộng 0 câu. Về token, Nate đọc là 490.000, còn bảng trên màn hình ghi 419.2K.

Trước khi chuyển sang high, Nate nhắc rằng bản medium đã là một output khá ổn, và chính Anthropic, trong bài hướng dẫn cách prompt Opus 5.5 (anh lỡ nói "video" rồi sửa lại là "bài viết"), khuyên nên bắt đầu ở medium rồi tăng hay giảm effort khi cần. Trang tài liệu Effort của Claude cũng ghi Opus 5.5 mặc định ở medium, và khuyên tự chạy thử các mức effort trên eval của chính mình thay vì giữ thiết lập của model cũ (tính đến 10/2026).

Run timeAPI costChecks theo video đăng ngày 24/09/2026 Low 16m 43sMedium 1h 13m Low $3.91Medium $12.44 Low 22Medium 23
Hình 6.1Từ Low lên Medium: thời gian chạy gấp hơn bốn lần, chi phí gấp hơn ba lần, nhưng số check gần như giữ nguyên (22 lên 23).

7. High: quảng trường, cửa kính tự động và passport

Quay lại với bản high. Một lần nữa, mọi thứ rất đúng thương hiệu, và màn hình chờ còn đẹp hơn bản trước: có một hiệu ứng nhỏ ở nền và có logo. Nate bấm vào venue.

Bản này cho anh bắt đầu ở bên ngoài tòa nhà, và trông khá đẹp. Ngoài quảng trường có những lá cờ cho từng diễn giả, mỗi lá ghi tên một người trong đội ngũ trình bày tại sự kiện. Có cả các tấm bảng "live", và một tấm lấy ảnh của chính Nate với dòng "your host, Nate Herk". Anh đi tới cửa: đó là cửa kính trượt tự động, và anh rất thích chi tiết này.

Quầy VIP Check-in trong sảnh Registration Concourse của bản High, có bảng lịch Day 2 và lối vào main stage
Bản High, sảnh Registration Concourse: quầy VIP Check-in với gợi ý "Pick up your VIP wristband", góc trái trên là passport đếm số khu đã ghé (4/13), phía sau là lối vào main stage và bảng lịch Day 2.

Trong sảnh có quầy VIP check-in và quầy GA. Anh đi qua expo với các booth khác nhau và khu Community Spotlight. Ở góc trên bên trái có một "passport", hiển thị anh đã ghé được bao nhiêu địa điểm. Và mọi màn hình ở đây đều phát video thật.

Có một bức tường tài nguyên (resource wall) với tài liệu của tất cả diễn giả. Có khu networking, Nate ghé qua xem: có quầy "AIS Cold Brew Bar", có các thành viên cộng đồng từng được spotlight hoặc được giới thiệu nổi bật, và có lối vào VIP wing.

8. High: wristband VIP, after party, closed captions

Khi tới VIP wing, Nate bất ngờ: game bảo anh phải đi lấy wristband trước. Anh quay lại check-in, game báo "Wristband is already on", và cánh cửa VIP mở ra cho anh. Anh hơi bối rối một chút rồi đi vào. Lối này dẫn tới main stage và VIP lounge; trong lounge có vẻ đang diễn ra một buổi Q&A. Nate nói anh rất ấn tượng với cách agent làm được điều này.

Anh giải thích: ở sự kiện thật, họ có những phòng VIP breakout với từng người khác nhau. Trong bản high, có đúng những phòng riêng biệt như thế, với các thành viên khác nhau của team AIS đang phụ trách từng phòng. Nate thấy cái này rất hay, và đây là một trải nghiệm VIP tốt hơn hẳn so với bản đầu.

Phòng VIP After-Party với sàn nhảy nhiều màu, bóng bay, quả cầu disco và màn hình phát video after party
VIP After-Party trong bản High: sàn nhảy nhiều màu, bóng bay, quả cầu disco, màn hình lớn phát lại buổi after party thật, và phụ đề chạy ở cuối khung hình.

Tiếp theo là VIP after party. Có sàn nhảy, có đủ thứ trang trí, có màn hình phát lại đúng buổi VIP after party thật, và có cả một quầy DJ, điều Nate thấy rất buồn cười. Ở một chỗ có một chút bug, một cái glitch nhỏ, nhưng anh vẫn thấy đây là phần tuyệt vời.

Khi anh vào main stage, có closed captions: ngay dưới đáy màn hình hiện phụ đề lời của diễn giả đang nói trên sân khấu. Có đèn chiếu, có cả bàn panel. Main stage đẹp. Từ đây anh có thể đi sang ba track: foundation, advanced và enterprise. Anh xem qua: có buổi "Anatomy of Three Real Deals", có phần Hyperagent, có buổi về evals do Nate và một thành viên team trình bày, có các buổi advanced. Theo anh, bản này rất ổn.

Nate tóm lại: tới đây, low tạm được, medium tốt hơn, high còn tốt hơn nữa. Anh muốn xem xu hướng này có tiếp tục không. Về chi phí, theo video đăng ngày 24/09/2026: bản high chạy 1 giờ 7 phút, tức nhanh hơn medium một chút, tốn $16.31 theo giá API, dùng nửa triệu token (509.000), chạy 22 check. Ban đầu anh nói nó không hỏi câu nào, rồi tự sửa: bản này có hỏi anh một câu. Và anh "spoil" trước rằng đây là bản duy nhất trong cả thí nghiệm hỏi lại anh.

9. Extra: trò chuyện với người tham dự và ngồi vào ghế

Còn ba bản: extra, max và Ultracode. Nate mở bản extra. Màn hình chờ trông khá ổn, nhưng nếu chỉ xét màn hình chờ thì anh vẫn cho bản high là đẹp nhất trong số đã xem. Anh bấm vào AIS Live.

Ngay lập tức có điều mới: những đoạn thoại ngắn (sound bite) và anh có thể trò chuyện với người tham dự. Một người nói rằng buổi panel "Tool War" đã giải quyết giúp họ vài cuộc tranh luận, và Nate thấy đó là một góc nhìn hay. Anh lại bắt đầu ở bên ngoài. Có những tấm banner, nhưng tất cả giống hệt nhau, không ghi tên từng người. Có logo AIS Live lớn, có lối sang workshop wing.

Anh đi qua cửa kính trượt. Bên trong có AIS Cafe. Bản đồ nằm ở góc dưới bên phải và không mô tả nhiều; anh thích cách các bản trước ghi rõ chỗ nào là gì, nhưng thừa nhận bản này trông rất chuyên nghiệp. Anh vào main stage xem nhanh: ở bản nào cũng có mấy quả "AIS Beach Balls" bay tứ tung, và anh thấy điều đó khá buồn cười. Trên sân khấu đang chiếu chính anh, có lẽ là phần anh mở đầu một trong hai ngày.

Anh đi tiếp sang phòng workshop bên trái. Ở đây là "Hyperagent Theater", với một buổi do Hyperagent tài trợ, và màn hình còn cho biết sắp tới trong phòng này có gì. Nate lại thấy buồn cười vì có thể nói chuyện với người tham dự: một người kể một diễn giả đã build một voice sales rep ngay tại chỗ, một người khác nói phòng "Price It Right" đã chật kín, một người hỏi anh đã lấy "VIP companion guide" chưa.

Nhân vật ngồi ở hàng ghế trong phòng Advanced Track của bản Extra, màn hình hiện Seated. Press E to stand
Bản Extra, phòng Advanced Track: nhân vật đã ngồi vào ghế giữa những người tham dự có laptop, trên cùng hiện "Seated. Press E to stand", dưới đáy là live captions của buổi workshop về voice AI sales rep.

Anh vào phòng advanced track, nơi một lần nữa có video phát trực tiếp. Lúc đầu anh không chắc nó có đang phát không, rồi nhận ra video bắt đầu chạy khi anh bước vào. Anh có thể ngồi xuống ghế để xem, đứng dậy, rồi chọn ngồi ở hàng đầu. Anh thích điều này.

Nate còn để ý một điều: nhân vật anh điều khiển trông hơi giống anh. Anh đoán agent đã dựng nó dựa trên ảnh thumbnail của anh. Trong một phòng khác, người host phòng mời "grab any open seat", tức cứ chọn ghế trống mà ngồi. Anh rất thích chức năng ngồi này: thấy buồn cười vì mình thật sự có thể "dự" workshop và tham gia. Phòng còn hiển thị danh sách diễn giả và agenda.

10. Extra: thảm đỏ, VIP lounge có worksheet và các con số

Có một tấm thảm đỏ nhỏ để chụp ảnh, và anh có thể tạo dáng (strike a pose). Nate thấy chi tiết này khá hay. Rồi tới thư viện tài nguyên, các booth, trong đó có Hyperagent và AIS+, cùng khu "Three Real Deals". Anh nhận xét rằng tới đây, mỗi bản đều tốt hơn bản trước, và anh còn chưa xem khu VIP.

Anh đi lên VIP lounge, hy vọng mình được vào, và được vào thật. Ở đây có phòng "Tooling Reset" và nhiều phòng khác để vào. Một lần nữa, anh có thể cầm worksheet lên và thử tìm hiểu cách định giá dịch vụ của mình. Nate nói cái này "quá hay", và rõ ràng tốt hơn bản trước, nơi anh chủ yếu chỉ đi nhìn mọi thứ. Anh còn đi được ra sau quầy bar. Anh thấy rất đẹp.

Về số liệu, theo video đăng ngày 24/09/2026: bản extra chạy khoảng một tiếng rưỡi (bảng ghi 1h 31m), tốn $25.92 (anh đọc "25.92 bucks" rồi đọc lại là $25.92), dùng 733.000 token, chạy 34 check, nhiều nhất từ đầu tới giờ với khoảng cách lớn, và hỏi lại 0 câu. Nate nói anh rất háo hức xem max và Ultracode sẽ ra sao.

11. Max: dáng đi tệ, booth đẹp, đổi chủ đề main stage

Tới bản max. Màn hình chờ nhàm chán, nhưng đúng thương hiệu và có logo, nên vẫn ổn, anh thích. Khi bấm vào AIS Live, có một đoạn animation nhỏ đưa người chơi vào trong. Một lần nữa, nhân vật trông giống anh; Nate nói tất cả các bản đều trông giống anh, "ừ thì, kiểu vậy". Phía sau lại có một thành phố, lần này giống Chicago.

Anh nhắc lại rằng nhiều bản có phát âm thanh, có nhạc nhẹ, nhưng anh không đưa vào video vì người xem sẽ rất khó vừa nghe trong game vừa nghe anh nói. Rồi anh chê dáng đi: "Tôi ghét cách nó đi". Dáng đi trong bản này rất, rất tệ, anh hoàn toàn không thích, nên đó là điểm trừ. Ngoài chuyện đó ra, anh đi vào khám phá.

Anh để ý bóng đổ khi anh bước vào trong nhà đổi rất gắt, không rõ vì sao. Ở đây cũng có thể trò chuyện với người tham dự; một người nói booth Hyperagent nằm ngay chỗ vừa bước vào expo. Anh có thể bấm E liên tục để họ đổi câu nói. Có khu giới thiệu diễn giả trông khá đẹp, nhưng ở sự kiện thật họ có ảnh đại diện của tất cả mọi người, nên anh không hiểu sao bản này không đưa vào. Có người đang chụp ảnh, và game lưu lại một tấm ảnh nhỏ, anh thích chi tiết đó. Bản đồ thì không giải thích rõ đâu là đâu.

Nhưng anh thích các booth ở bản này, theo anh là những booth đẹp nhất từ đầu tới giờ: trông gọn gàng, có nhân viên đứng booth, có slide đẹp phía sau. Có một khu "featured theater" với phần của một diễn giả, nhưng anh thắc mắc sao video không phát, vì ở các bản khác chúng luôn phát. Anh trò chuyện thêm với vài người: một người nói cà phê miễn phí, và vài người tham dự khác. Đây chỉ là khu networking.

Ở góc trên bên phải, anh thấy cả những gì đang live trên main stage: lúc đó là panel "Tool War". Anh vào main stage, thấy bốn diễn giả đang trò chuyện, có hệ thống âm thanh ánh sáng phía sau. Có một nút "Switch the main stage to what actually matters right now", cho phép anh đổi chủ đề. Anh đổi sang buổi của chính anh với một diễn giả khác, rồi đổi tiếp sang "Anatomy of Three Real Deals". Anh thấy cái này khá hay. Sân khấu đẹp, có bàn panel nhỏ. Anh thử leo lên sân khấu và được, nhưng không đi xa được.

12. Max: thang cuốn, badge VIP, bug và các con số

Trên sân khấu, Nate lại đùa "nào mọi người, chụp selfie, mọi người vào khung đi". Anh cũng có thể ngồi xuống hàng ghế khán giả để thưởng thức buổi nói chuyện. Rồi anh đi sang một bên và thấy có tầng trên. Anh thấy buồn cười vì bản nào cũng chọn đặt khu VIP ở tầng trên, nhưng không ghét ý đó.

Bất ngờ: có cả thang cuốn. Anh trò chuyện với một người trên thang cuốn, người này kể về một nhân vật có 15 năm kinh nghiệm agency và khen phần "land and expand" của anh ấy "đáng giá như vàng". Nhưng anh không đi qua được người này, phải nhảy qua đầu anh ta. Lên tới nơi, game báo cần badge cấp VIP. Nate thốt lên "bạn đùa tôi à", anh phải quay xuống lấy badge.

Lối vào VIP Level của bản Max có dây chắn đỏ, thông báo VIP badge required, pick it up at Registration
Bản Max, tầng VIP: dây chắn đỏ và thông báo "VIP badge required · pick it up at Registration". Góc phải trên là thẻ live của main stage, đang chiếu "Anatomy of Three Real Deals".

Lấy xong, game hiển thị anh là VIP thật, và anh lên được khu VIP. Có những phòng working session nhỏ để vào. Anh thử xem có ngồi xuống được không: có thể trò chuyện, nhưng không cho ngồi và tham gia. Anh thấy cũng không sao. Có phòng "Pricing War Room", và một khu có vẻ là after party. Anh đi thử thì phải vào từ một lối khác mới được, khá lạ. After party ở đây không hay bằng bản high.

Rồi anh sang khu workshop phía sau, và gặp lỗi: anh nhìn xuyên được qua mọi thứ, nhân vật bị glitch rồi "bùm". Anh cho là không tốt. Anh cũng không ngồi được vào ghế ở đây. Anh nói anh thích bản trước đó hơn, bản mà anh nhớ là high. Tổng kết, anh không thích dáng đi, không thích "vibe" bằng, và có vài bug. Rồi nhìn lại danh sách, anh nói tới lúc đó bản anh thích nhất là extra.

Về số liệu, theo video đăng ngày 24/09/2026: bản max chạy 2 giờ 28 phút, rất lâu, tốn $50.38 theo giá API, dùng 1,18 triệu token. Vì vậy nó chạm tới giới hạn và phải auto compact (nén context). Nó chạy 51 check, nhưng Nate tỏ ra nghi ngờ: "chạy thật không đấy", vì có rất nhiều bug. Nó hỏi lại 0 câu.

Anh nhận xét rằng tới đây, gần như mỗi lần tăng effort lại đắt hơn và lâu hơn, trừ cặp medium và high, hai bản có thời gian chạy gần như nhau. Nhưng lần nào cũng dùng nhiều token hơn, vì model nghĩ nhiều hơn, và token nhiều thì chi phí cao hơn.

13. Ultracode: badge đẹp, nhiệm vụ dẫn đường, video chỉ chạy khi bước vào

Bản cuối là Ultracode, bản mà theo Nate "chúng ta rất hy vọng sẽ là bản hay nhất". Anh mở localhost. Badge trông đẹp, ghi "Host · All Access", kèm một hình minh họa nhỏ. Anh bấm vào AIS Live, và được chào "Welcome in, Nate". Anh thích dáng đi ở bản này, cảm giác rất thật. Anh thích logo, dù nó thiếu chấm đỏ nhỏ khiến chữ trông như "live". Bản đồ góc trên bên phải được gắn nhãn tốt hơn, nên anh biết chỗ nào đang có gì.

Lấy VIPwristband Quét ở cổng VIP(tường phía đông) Vào các phòngVIP, after party Ngồi ghế cạnhlối đi, main stage Gợi ý nhiệm vụ hiện ở góc trên bên trái màn hình
Hình 13.1Bản Ultracode dẫn người chơi bằng một chuỗi nhiệm vụ: lấy wristband, quét ở cổng VIP, đi qua các phòng VIP, rồi ra main stage tìm ghế cạnh lối đi.

Anh vào lấy VIP wristband. Bản này còn chỉ cho anh phải làm gì: ở góc trên bên trái ghi "scan in at the VIP gate at the lobby east wall". Nate tự hỏi phía đông là phía nào, rồi nhắc câu thần chú nhớ bốn hướng "Never Eat Soggy Waffles" (North, East, South, West) để định hướng. Anh tìm thấy VIP wing, quét wristband, và vào được khu VIP.

Ở đây có nhiều phòng, trong đó có "Tooling Reset", video đang phát trực tiếp, và closed captions của nội dung đang nói. Âm thanh cũng có, nhưng anh không bật lên trong video để người xem đỡ bị quá tải. Một phòng khác có hai thành viên team đang trình bày. Anh để ý video không phát cho tới khi người chơi bước vào phòng, và cho rằng đó là một quyết định đúng: vừa bước vào là video chạy. "Một chi tiết tinh tế." Tất cả các phòng đều vậy. Bản này cho anh cảm giác rất cao cấp (premium). Có cả phòng "Pricing War Room", nơi có Nate và một thành viên team.

Rồi tới after party. Phòng này chưa đông lắm, và lại có thêm beach ball không rõ vì sao, nhưng anh thấy after party vẫn hay, có không khí tốt, và có màn hình phát lại buổi Q&A after party thật, cũng đang phát trực tiếp.

Game nhắc anh ra main stage tìm một ghế cạnh lối đi (aisle seat), lối đi thẳng qua khu expo. Anh quyết định đi qua expo trước. Ở đây có nhiều người đang nói về những thứ khác nhau, có câu kiểu "What are you building?". Có cả một góc chơi bóng rổ nhỏ: anh thử ném được, nhưng không biết có phải ngước lên mới ném cao được không, và kết quả không tốt lắm. Rồi anh đi qua booth AIS+, một booth sản phẩm (anh hỏi màn hình có đang phát trực tiếp không, và xác nhận là có), booth Hyperagent và vài thứ khác.

14. Ultracode: ghế cạnh lối đi, phòng chụp ảnh và các con số

Nate vào main stage để tìm ghế cạnh lối đi. Vừa bước vào là mọi thứ bắt đầu phát, không khí sân khấu rất đẹp. Anh loay hoay không biết lấy ghế cạnh lối đi kiểu gì, rồi tìm đúng ghế và ngồi được. Nhưng trên sân khấu không có ai, điều anh thấy lạ, vì anh thích các bản trước có người trên sân khấu. Anh đùa chụp một tấm selfie. Trên màn hình là anh và một thành viên team; người kia mặc đồ như công nhân xây dựng, vì trong buổi đó họ đóng vai một cuộc discovery call mẫu.

Anh quay lại qua expo và đi ra workshop wing để xem các phòng có giống như phải có không. Lần này anh không trò chuyện được với người tham dự nữa; ở các bản trước làm được, và anh thấy đó là một chi tiết rất hay. Ở "Workshop A, Foundation Track", anh thử ngồi xuống nhưng không được. Một diễn giả đang nói thật, có cả tiếng, điều đó ổn, nhưng game không cho ngồi. Rồi anh bị glitch nặng: nhân vật không chịu đi, cách nó di chuyển bị lỗi. Phòng advanced track cũng vậy.

Tổng thể, các bản có vibe khá giống nhau. Nhưng Nate nói anh ấn tượng với cách chúng kể được một câu chuyện từ những gì họ đã làm ở sự kiện. Có một "Speaker Takeaways Library", theo anh là thứ chưa thấy ở các bản khác: đây là các tài liệu, có cả những thứ hay ho, và anh mở được từng cái ra xem.

Hộp thoại Say cheese của AIS Live Photo Wall, hiện ảnh hai nhân vật trước phông AIS Live trên thảm đỏ, nút Save photo
Bản Ultracode, photo wall: sau khi chụp, game hiện hộp "Say cheese" với tấm ảnh in dòng "AIS Live · July 11-12, 2026" và nút "Save photo" để tải ảnh về.

Ở đây cũng chụp ảnh được: bấm "Take a photo", rồi lưu lại. Anh tải được tấm ảnh về máy thật, và giờ anh có tấm ảnh vừa chụp tại "sự kiện AIS Live" này.

Tới lúc rút ra kết luận, nhưng trước hết là số liệu, theo video đăng ngày 24/09/2026: bản Ultracode chạy 1 giờ 35 phút, nhanh hơn max nhiều, và chỉ tốn $18.69. Nate thốt "wow": nó đắt hơn high một chút, rẻ hơn extra, và rẻ hơn max rất nhiều. Nó dùng 606.000 token, chạy 42 check, hỏi lại 0 câu.

15. Không sub-agent, một lần compaction và nghi vấn về Ultracode

Nate chỉ ra một điều thú vị: trong tất cả các lần chạy, không lần nào dùng sub-agent. Anh đã xem lại và chắc chắn rằng không lần nào dùng. Model không muốn ủy thác (delegate) phần việc nào ra ngoài, điều anh thấy thú vị. Vì vậy số token trong bảng chính là những gì diễn ra trong một session duy nhất.

Như đã nói, bản max vượt qua ngưỡng khoảng 950K, "hoặc cửa sổ compaction là bao nhiêu đó", nên bị compact. Bình thường anh không bao giờ để session lên cao như vậy, nhưng vì đây là một lần chạy /goal và anh không can thiệp, nên bản max phải compact. Các bản còn lại đều chạy trọn trong một session. Đó là toàn bộ số liệu tổng.

Anh nói thêm nhanh về Ultracode. Anh hỏi người xem có để ý không: gần đây mỗi khi anh chạy Ultracode, cảm giác rất lạ, hơi có bug. Vài lần anh chạy mà tự hỏi "nó có đang chạy Ultracode thật không vậy". Lần này nó chạy nhiều check hơn hẳn các bản khác, nhưng vì lý do nào đó anh vẫn thấy không đúng.

Lý do: về bản chất, Ultracode là effort extra cộng thêm việc dùng nhiều dynamic workflow hơn để làm việc. Nhưng sau khi đào kỹ session log, và cả khi ngồi xem nó build ở chế độ Ultracode, anh không thấy nó khởi tạo bất kỳ dynamic workflow nào. Anh đã thử vài lần. Anh không biết đó là bug trong harness Claude Code lúc quay video, hay chỉ là Opus 5.5 đang chạy Ultracode kém hơn một chút. Dù sao, các mức còn lại mới là các mức effort "thật" trong thí nghiệm này.

16. Đọc biểu đồ chi phí, thời gian, token và check

Nate cho rằng mọi thứ khá hợp lý khi nhìn cách các con số tăng dần. Anh mở bảng tổng hợp.

Bảng so sánh sáu mức effort: run time, API cost, total tokens, checks, questions asked
Bảng tổng hợp sáu lần chạy (theo video đăng ngày 24/09/2026): Low 16m 43s / $3.91 / 191.3K token / 22 check; Medium 1h 13m / $12.44 / 419.2K / 23; High 1h 7m / $16.31 / 509.3K / 22 và 1 câu hỏi; Extra 1h 31m / $25.92 / 733.7K / 34; Max 2h 28m / $50.38 / 1.18M / 51; Ultracode 1h 35m / $18.69 / 606.2K / 42.

Theo video đăng ngày 24/09/2026: chi phí max so với low gấp 12,9 lần, giữa lần chạy rẻ nhất và lần đắt nhất. Nate đọc là "từ $3.98 lên $50.38", còn bảng ghi bản low là $3.91. Số check của max so với low gấp 2,3 lần. Tổng chi phí của cả sáu lần chạy là khoảng 127 đô (thẻ trên màn hình ghi $127.65), trong đó Ultracode là $18.69. Thẻ tổng hợp còn ghi chú rằng Ultracode là "xhigh plus workflows", nên được vẽ tách khỏi đường xu hướng thành một điểm rỗng màu cam.

Biểu đồ Speed vs cost: trục ngang run time, trục dọc API cost, sáu điểm cho sáu mức effort
Biểu đồ "Speed vs cost": trục ngang là thời gian chạy, trục dọc là chi phí API, kích thước chấm là số check. Low nằm ở góc dưới trái, Max ở góc trên phải, Ultracode (màu cam) nằm giữa High và Extra.

Anh thu nhỏ màn hình để xem trọn biểu đồ tốc độ so với chi phí. Trục x là thời gian chạy, trục y là chi phí. Anh nói điểm lý tưởng là góc dưới bên trái, "nhưng không hẳn". Low thì rẻ và nhanh. Max thì chậm và đắt. Biểu đồ kiểu này thường hợp lý: tăng effort thì tốn hơn và chạy lâu hơn một chút.

Tiếp theo là biểu đồ "Growth relative to Low", tăng trưởng so với low: thời gian chạy màu xanh dương, chi phí API màu cam, token màu xanh lá, và check màu vàng, mà anh gọi vui là "vàng mù tạt". Anh giải thích lý do Ultracode hiện theo kiểu riêng: nó thực ra dùng mức effort extra, chỉ là được khuyến khích dùng nhiều dynamic workflow hơn, nên về cơ bản bên dưới nó đang chạy extra. Đó cũng là lý do Claude tô nó màu cam trong biểu đồ.

Kéo xuống dưới, theo video đăng ngày 24/09/2026, xu hướng vẫn hợp lý: effort càng tăng thì các chỉ số thời gian chạy, chi phí API, token và check đều tăng (ở bản max lần lượt gấp 8,9 lần, 12,9 lần, 6,2 lần và 2,3 lần so với low). Bên dưới nữa là các biểu đồ đường riêng cho từng chỉ số: chi phí API, check, tổng token, chi phí trên mỗi check, và một bảng gom mọi con số vào một chỗ. Nate nói dữ liệu khá hay, nhưng không có gì quá bất ngờ. Điều khiến anh bất ngờ hơn là chất lượng kết quả.

17. So lại High và Extra, chọn người thắng

Hai ứng viên hàng đầu của Nate là high và extra. Anh quay lại từng bản để nhớ lại cảm nhận. Với high, anh rất thích cảm giác của nó: đây là bản chạy mượt nhất, vật lý tốt, cửa kính trượt đẹp, và anh gần như không gặp bug, điều anh rất thích.

Nhưng khi xem lại, anh nhớ ra ở bản high anh không nói chuyện được với ai, chỉ đi xuyên qua người khác. Anh cũng không ngồi được. Anh chỉ cho người xem thêm một lỗi hình ảnh: nhân vật đi xuyên thẳng qua tường. Anh không thích điều đó. Anh tự hỏi có phải đây là bản cho ngồi trong các phòng không, kiểm tra lại và thấy là không. Vậy bản này không phải người thắng.

Anh mở extra. "Tôi nghĩ đây là người thắng. Ừ, tôi nghĩ đây là bản tôi thích nhất." Anh yêu toàn bộ không khí của nó, thích việc nói chuyện được với người tham dự. Đây chắc chắn là bản cho phép vào phòng, ngồi bất cứ đâu, ngồi xuống, đứng dậy. Anh đọc được tài liệu "three deals" và trò chuyện với họ. Anh còn phát hiện ra có những khu nhỏ để thực hành discovery call mẫu. Có swag và túi tote, với vật lý thật, và anh thích điều đó. Đây là bản cho ngồi ở mọi nơi. Anh thật sự rất thích bản này.

Điểm trừ duy nhất của extra, theo anh, là không có VIP after party. Khu đó chỉ là lounge, và đó là phần duy nhất của khu VIP: các phòng khác nhau để vào và ngồi. Ngoài ra, trải nghiệm VIP của nó không bằng vài bản khác.

Extrathắng~1/2 runtime~1/2 chi phí của Max Highmượt, ít bugcần thêm 1-2 prompt Maxquá nhiều cho quá ít Nhận xét của Nate cho bài build sáng tạo phức tạp, theo video đăng ngày 24/09/2026
Hình 17.1Kết luận của Nate cho bài này: Extra thắng, High đứng sau và chỉ cần thêm một hai prompt, còn Max tốn quá nhiều cho kết quả không xứng.

Vì vậy, người thắng của Nate chắc chắn là extra. Theo anh, extra làm "xuất sắc". Theo video đăng ngày 24/09/2026, nó tốn khoảng một nửa thời gian chạy và một nửa chi phí của max. Max, theo anh, là "quá nhiều cho quá ít kết quả tốt". Bản high thì khá ổn; có lẽ chỉ cần thêm một hai prompt nữa là nó đạt tới mức anh thật sự thích. Nhưng với một lần chạy /goal, extra đã cho ra một kết quả tuyệt vời. Anh không thích bản medium lắm.

18. Mức effort Nate sẽ dùng và lời kết

Nate nói thêm rằng với phần lớn công việc tri thức (knowledge work) và các việc khác anh làm, medium là đủ dùng. Nhưng riêng bài này cần rất nhiều suy luận. Agent phải đi qua vô số thứ: hàng loạt video, phải tìm rất nhiều thứ trong các project của anh, phải tạo ra một trải nghiệm và kể được một câu chuyện từ tất cả những gì có.

Nhìn chung, anh thích nhiều output trong số này, nhưng extra là bản anh muốn bắt đầu từ đó tại thời điểm quay video. Nếu muốn biến nó thành một app và một thế giới thật sự bóng bẩy và thú vị, anh sẽ lấy output của extra làm điểm khởi đầu và có lẽ tiếp tục lặp (iterate) cũng bằng extra.

Đó là toàn bộ thí nghiệm. Nate hy vọng người xem thấy nó hữu ích và học được điều gì mới; nếu vậy, anh nhờ mọi người bấm like vì nó giúp anh rất nhiều. Anh cảm ơn người xem đã theo tới cuối video và hẹn gặp ở video sau.

Nguồn và liên kết 7 nguồn

  1. Tên gốc: I Had Opus 5.5 Build me the Same App at Every Effort Level
  2. Sự kiện: YouTube
  3. Video gốc: https://www.youtube.com/watch?v=QCkHIyEPIYo youtube.com
  4. Kênh YouTube Nate Herk | AI Automation (Nate Herk): youtube.com/channel/UC2ojq-nuP8ceeHqiroeKhBA youtube.com
  5. Giới thiệu Claude Opus 5.5 của Anthropic: anthropic.com/claude-opus-5-5 anthropic.com
  6. Tài liệu Effort của Claude (các mức low, medium, high, xhigh, max; Opus 5.5 mặc định medium; khuyên chạy thử các mức effort trên eval của chính mình): platform.claude.com/docs/en/build-with-claude/effort platform.claude.com
  7. Frame.io, nơi chứa thư mục video của sự kiện: frame.io frame.io