Từ vài giây xuống mili giây: Vì sao robot buộc AI phải học cách suy nghĩ trong thời gian thực
Chatbot có thể chờ vài giây để suy luận, nhưng robot phải phản ứng trước khi thế giới vật lý thay đổi. Cuộc đua physical AI đang chuyển từ “thông minh hơn” sang “thông minh đủ nhanh”.
Một chatbot có thể dành vài giây để suy nghĩ trước khi trả lời. Với robot, vài giây có thể là quá muộn. Một chiếc cốc đang trượt khỏi tay, một người bất ngờ bước vào đường di chuyển hay cơ thể robot hình người bắt đầu mất thăng bằng đều là những tình huống mà quyết định phải xuất hiện trước khi môi trường đã đổi khác.
Đây là lý do cuộc đua AI thời gian thực cho robot đang trở thành một hướng phát triển quan trọng của physical AI. Bài toán không còn chỉ là làm cho mô hình hiểu ngôn ngữ, hình ảnh và thế giới tốt hơn. Trí tuệ đó còn phải chạy đủ nhanh, đủ ổn định và đủ gần cảm biến để biến hiểu biết thành hành động đúng lúc.
Những công bố mới từ Google DeepMind, NVIDIA và các nhóm nghiên cứu robot cho thấy ngành đang dần hội tụ về một kiến trúc mới: mô hình lớn đảm nhiệm suy luận cấp cao, trong khi các lớp nhỏ hơn chạy trực tiếp trên robot xử lý phản xạ, cảm biến và điều khiển với độ trễ thấp.
Trong thế giới vật lý, câu trả lời đúng nhưng đến muộn vẫn có thể là câu trả lời sai
AI trên máy tính thường được đánh giá bằng độ chính xác, khả năng suy luận hoặc chất lượng đầu ra. Robot phải thêm một biến khác: thời gian.
Hãy hình dung camera vừa ghi nhận một vật thể đang di chuyển về phía cánh tay robot. Dữ liệu cần được truyền vào bộ nhớ, xử lý qua mô hình thị giác, đưa vào policy điều khiển, chuyển thành lệnh motor rồi mới tạo ra chuyển động vật lý. Nếu toàn bộ chuỗi mất quá lâu, robot đang ra quyết định dựa trên một thế giới đã cũ.
Vấn đề này thường được mô tả bằng khái niệm staleness: quan sát vẫn đúng tại thời điểm nó được ghi nhận, nhưng đã lỗi thời khi hành động được thực thi. Với chatbot, chậm thêm vài trăm mili giây thường chỉ khiến người dùng phải đợi. Với robot, khoảng trễ tương tự có thể làm thay đổi hoàn toàn kết quả.
Do đó, độ trễ quan trọng không chỉ là thời gian chạy neural network. Thước đo thực tế hơn là sensor-to-actuator latency: từ lúc cảm biến phát hiện thay đổi cho tới khi cơ cấu chấp hành bắt đầu phản ứng.
VLA khiến robot thông minh hơn, nhưng cũng kéo một bài toán tính toán lớn xuống thân máy
Một trong những hướng nổi bật của robotics hiện nay là mô hình Vision-Language-Action, hay VLA. Thay vì viết chương trình riêng cho từng kỹ năng, VLA nhận hình ảnh, chỉ dẫn ngôn ngữ và trạng thái robot để tạo ra hành động.
Lợi ích rất rõ: một robot có thể hiểu yêu cầu linh hoạt hơn, thích nghi với vật thể mới và thực hiện nhiều nhiệm vụ mà không cần lập trình lại toàn bộ quy trình. Nhưng cái giá phải trả là lượng tính toán lớn hơn.
Mô hình càng mạnh về thị giác và suy luận thường càng tiêu tốn bộ nhớ, băng thông và thời gian inference. Nếu mọi thay đổi nhỏ của camera đều phải đi qua một mô hình lớn trước khi motor được phép hành động, vòng điều khiển dễ trở nên chậm hoặc không ổn định.
Đây là khoảng cách giữa hai nhịp thời gian khác nhau. Suy luận cấp cao có thể diễn ra theo hàng trăm mili giây hoặc giây. Điều khiển cân bằng, lực kẹp, tránh va chạm hay phản ứng với cảm biến lại cần chạy nhanh hơn nhiều.
Gemini Robotics 2 cho thấy AI robot đang được chia thành nhiều tầng
Ngày 30/7/2026, Google DeepMind giới thiệu thế hệ Gemini Robotics 2 với cách tổ chức thể hiện khá rõ xu hướng phân tầng của physical AI.
Gemini Robotics ER 2 đảm nhiệm embodied reasoning và orchestration: hiểu video liên tục, theo dõi tiến độ công việc, gọi các API điều khiển và phối hợp nhiều bước. DeepMind cho biết mô hình được tích hợp với Gemini Live API qua kết nối streaming hai chiều nhằm phục vụ các nhiệm vụ nhạy cảm với độ trễ và giảm những khoảng “dừng để nghĩ” giữa các bước.
Ở một lớp khác, Gemini Robotics On-Device 2 được xây dựng cho những robot không thể phụ thuộc vào độ trễ mạng hoặc kết nối Internet. Mô hình chạy trực tiếp trên thiết bị, đưa phần quyết định cần phản ứng nhanh tới gần camera, cảm biến và motor hơn.
Cách tách này gợi ra một kiến trúc thực tế: không nhất thiết bắt một mô hình duy nhất vừa hiểu mục tiêu dài hạn, vừa đọc mọi cảm biến, vừa điều khiển từng chuyển động nhỏ. Mỗi tầng có thể được tối ưu cho một thang thời gian khác nhau.
Robot có thể cần một “não chậm” và một hệ phản xạ nhanh
Con người không giải một bài toán ngôn ngữ mỗi lần cần giữ thăng bằng. Khi bước trên mặt đường gồ ghề, cơ thể liên tục sử dụng các vòng phản hồi nhanh từ thị giác, tiền đình, cơ và khớp; trong khi ý thức vẫn có thể nghĩ về mục tiêu dài hạn.
Robot cũng đang tiến gần cách tổ chức tương tự.
- Tầng suy luận chậm: hiểu yêu cầu của người dùng, xác định mục tiêu, lập kế hoạch nhiều bước, chọn công cụ hoặc quyết định chiến lược.
- Tầng hành động trung gian: chuyển mục tiêu thành quỹ đạo, kỹ năng hoặc chuỗi hành động ngắn.
- Tầng phản xạ nhanh: đọc encoder, IMU, lực, xúc giác và cảm biến khoảng cách để giữ ổn định, tránh va chạm và điều chỉnh chuyển động.
Thiết kế này giúp robot không phải chờ một mô hình lớn hoàn thành toàn bộ reasoning mới được phép phản ứng. Nếu kế hoạch cấp cao chưa thay đổi, các controller bên dưới vẫn có thể tiếp tục giữ thăng bằng, bám vật hoặc dừng khẩn cấp.
Action chunking giúp mô hình lớn bớt phải “nghĩ lại” ở từng bước
Một kỹ thuật phổ biến để thu hẹp khoảng cách giữa inference chậm và điều khiển nhanh là action chunking.
Thay vì mỗi lần inference chỉ sinh một lệnh vận động, mô hình dự đoán cả một đoạn hành động cho tương lai gần. Robot bắt đầu thực hiện đoạn đó trong khi hệ thống chuẩn bị chunk tiếp theo.
Cách làm này giảm số lần mô hình lớn phải được gọi và giúp chuyển động liên tục hơn. Tuy nhiên, nó tạo ra một đánh đổi mới: chunk càng dài thì càng tiết kiệm inference, nhưng càng dễ trở nên lỗi thời khi môi trường thay đổi giữa chừng.
Physical Intelligence đã giới thiệu Real-Time Action Chunking nhằm duy trì chuyển động mượt trong trường hợp inference của VLA có độ trễ. Thay vì coi từng chunk như một kế hoạch độc lập, hệ thống tạo chunk mới trong khi robot vẫn thực hiện phần đã cam kết, giúp giảm khoảng dừng giữa các lần suy luận.
Ý tưởng cốt lõi ở đây rất quan trọng: robot không nhất thiết phải làm mô hình lớn nhanh đến mức bằng chính vòng điều khiển motor. Hệ thống có thể che giấu một phần độ trễ bằng cách cho tính toán và hành động diễn ra đồng thời.
Cloud vẫn hữu ích, nhưng phản xạ không thể phụ thuộc hoàn toàn vào mạng
Cloud có một lợi thế lớn: dễ cung cấp GPU mạnh và bộ nhớ lớn cho những mô hình phức tạp. Vì vậy, suy luận cấp cao như phân tích một căn phòng, lập kế hoạch dài hạn hoặc truy xuất tri thức vẫn có thể diễn ra trên máy chủ.
Nhưng đường truyền mạng đưa vào vòng điều khiển một loại bất định khó chấp nhận với phản xạ nhanh. Latency có thể thay đổi theo tải mạng, Wi-Fi có thể nhiễu, packet có thể mất và kết nối có thể gián đoạn.
Ngay cả khi round-trip trung bình đủ thấp, một số spike độ trễ vẫn có thể khiến robot phản ứng muộn đúng vào thời điểm quan trọng. Vì vậy, xu hướng kiến trúc hợp lý là cloud cho suy luận sâu, edge cho phản xạ.
Đây cũng là lý do “on-device AI” trong robotics không chỉ mang ý nghĩa hoạt động offline. Nó là cách loại bỏ một biến bất định khỏi chuỗi perception–action.
Jetson Thor cho thấy phần cứng robot đang tiến gần một data center thu nhỏ
NVIDIA xây dựng Jetson Thor trực tiếp cho physical AI và robot cần xử lý nhiều nguồn cảm biến cùng lúc. Nền tảng Jetson AGX Thor dùng GPU kiến trúc Blackwell, bộ nhớ 128 GB và có mức tính toán AI tối đa 2.070 FP4 TFLOPS theo công bố của hãng.
NVIDIA cho biết Thor đạt tới 7,5 lần AI compute và 3,5 lần hiệu quả năng lượng so với Jetson AGX Orin trong các chỉ số của hãng. Mục tiêu không chỉ là chạy một neural network lớn, mà là đồng thời xử lý camera, vision model, VLM, VLA, mapping và các workload robot khác trên cùng thiết bị.
Trong một thử nghiệm do NVIDIA công bố với Qwen2.5-VL-3B và Llama 3.2 3B chạy nhiều yêu cầu đồng thời, Time to First Token đều dưới 200 ms và Time per Output Token dưới 50 ms. Đây không phải trực tiếp là latency motor của robot, nhưng cho thấy phần cứng edge đang được tối ưu để gánh những mô hình tạo sinh từng chỉ phù hợp với server lớn.
Tháng 1/2026, NVIDIA tiếp tục mở rộng dòng Thor với Jetson T4000, cung cấp tới 1.200 FP4 TFLOPS và 64 GB bộ nhớ cho các hệ robot có giới hạn điện năng và nhiệt chặt hơn.
Độ trễ trung bình thấp chưa đủ: robot còn cần tính xác định
Một hệ thống chạy trung bình 10 ms nhưng thỉnh thoảng mất 200 ms có thể kém an toàn hơn một hệ thống luôn phản hồi trong 20 ms.
Trong robotics, yêu cầu quan trọng là determinism: khả năng dự đoán rằng tác vụ sẽ hoàn thành trước deadline với độ tin cậy cao. Vì vậy, tăng FLOPS chỉ giải quyết một phần bài toán.
Camera driver, bộ nhớ, scheduler, kernel GPU, bus truyền dữ liệu, hệ điều hành thời gian thực và motor controller đều có thể tạo jitter. Một mô hình chạy nhanh trên benchmark chưa chắc tạo thành một robot phản ứng nhanh nếu các thành phần còn lại của pipeline không được tối ưu đồng bộ.
Điều này lý giải vì sao các hệ robot thương mại vẫn cần watchdog, thread priority, realtime kernel và controller truyền thống bên dưới lớp AI. Mạng neural có thể đưa ra quyết định linh hoạt, nhưng các giới hạn an toàn và vòng phản hồi cực nhanh không nhất thiết nên phụ thuộc hoàn toàn vào mô hình tạo sinh.
Cuộc đua mới là co-design mô hình, phần cứng và hệ điều khiển
Trong AI truyền thống, đội ngũ có thể tối ưu mô hình rồi chạy nó trên GPU mạnh hơn. Robotics khó tách rời như vậy.
Một mô hình nhỏ hơn có thể thắng nếu giúp robot phản ứng nhanh, tiêu thụ ít điện và ổn định hơn. Một accelerator vision riêng có thể quan trọng hơn thêm vài tỷ tham số. Một cơ chế streaming tốt có thể giảm thời gian chờ mà không cần tăng nhiều compute. Một controller cổ điển được thiết kế đúng có thể an toàn hơn việc bắt VLA xử lý mọi tín hiệu.
Do đó, physical AI đang trở thành bài toán co-design giữa nhiều lớp:
- mô hình AI và cách sinh hành động;
- phần cứng edge và bộ nhớ;
- sensor fusion và pipeline dữ liệu;
- hệ điều hành thời gian thực;
- controller, actuator và cơ khí;
- cơ chế an toàn khi mô hình hoặc mạng bị chậm.
Không lớp nào có thể được xem là miễn phí về thời gian.
Thước đo của robot AI sẽ khác chatbot
Chatbot thường được so sánh bằng độ chính xác, chất lượng suy luận, token mỗi giây và chi phí trên mỗi triệu token. Với robot, những thước đo đó chưa đủ.
Các hệ physical AI sẽ ngày càng được đánh giá bằng những chỉ số gần với vận hành thực tế hơn: thời gian đến hành động đầu tiên, sensor-to-actuator latency, jitter, tần số điều khiển, tỷ lệ hoàn thành nhiệm vụ, mức tiêu thụ điện và khả năng duy trì phản ứng khi kết nối mạng bị suy giảm.
Đây là thay đổi quan trọng trong cách hiểu về “AI mạnh”. Một mô hình giỏi hơn trên benchmark không tự động tạo ra robot tốt hơn. Trong thế giới vật lý, trí tuệ chỉ hữu ích khi nó đến trước deadline.
Từ “AI biết nghĩ” sang “AI biết phản ứng đúng lúc”
Cuộc đua robot hiện nay thường được mô tả bằng số tham số, khả năng hiểu ngôn ngữ hay những màn trình diễn khéo léo. Nhưng phía sau các video ấn tượng là một vấn đề kỹ thuật ít hào nhoáng hơn: từng mili giây của pipeline.
Google DeepMind đang đẩy VLA xuống thiết bị và tách reasoning khỏi local execution. NVIDIA xây máy tính edge đủ mạnh để chạy nhiều mô hình và luồng cảm biến trên thân robot. Các nhóm nghiên cứu tiếp tục tìm cách chunk, stream và chồng lấp inference với hành động.
Xu hướng chung là rõ ràng: robot đa năng khó có thể dựa vào một “bộ não” duy nhất suy nghĩ mọi thứ ở cùng một tốc độ. Hệ thống tương lai nhiều khả năng sẽ giống một hệ thần kinh phân tầng, nơi các mô hình lớn nghĩ sâu khi cần, còn những lớp phản xạ nhanh bảo đảm cơ thể không đứng yên chờ trí tuệ hoàn thành câu trả lời.
Với chatbot, chờ thêm một giây là vấn đề trải nghiệm. Với robot, một giây có thể là khoảng cách giữa bắt được chiếc cốc và nhìn nó rơi xuống sàn. Cuộc đua physical AI vì thế không chỉ hỏi máy có thể suy nghĩ thông minh đến đâu, mà còn hỏi một câu thực dụng hơn: nó có thể suy nghĩ và hành động kịp lúc hay không?
Nguồn tham khảo
- Google DeepMind: Gemini Robotics 2 brings whole body intelligence to robots.
- Google DeepMind: Introducing Gemini Robotics ER 2.
- Google DeepMind: Gemini Robotics On-Device 2.
- NVIDIA Developer: Introducing NVIDIA Jetson Thor.
- NVIDIA Developer: Jetson T4000 và JetPack 7.1.
- Physical Intelligence: Real-Time Action Chunking with Large Models.