×
Trong các ứng dụng IoT thị giác không người giám sát, được cấp nguồn bằng pin hoặc hệ thống quang điện mặt trời, thiết bị rất khó đạt đồng thời cả thời gian chờ siêu dài và khả năng kết nối điều khiển theo thời gian thực. Đây là nút thắt chính hạn chế việc triển khai quy mô lớn các dự án giám sát môi trường ngoài trời, an ninh nói chung và kiểm tra công nghiệp không người giám sát.
Để giải quyết những thách thức ngành nêu trên, Rockchip đã ra mắt dòng vi xử lý SoC RV1106 chuyên về xử lý thị giác cho các ứng dụng AIoT thị giác. Các chip này tích hợp CPU, NPU, ISP và bộ mã hóa/giải mã video nhằm phục vụ các thiết bị AI thị giác nhúng có mức tiêu thụ điện thấp và chi phí cạnh tranh. Các ứng dụng tiêu biểu bao gồm camera an ninh chạy bằng pin, giám sát nông – lâm nghiệp, giám sát trạm thủy lợi và kiểm tra công nghiệp không người giám sát.
Mô-đun Chức Năng |
Thông số kiến trúc và hiệu năng |
Giá trị Kỹ thuật |
CPU và MCU |
Bộ vi xử lý ARM Cortex-A7 32 bit, một nhân, có hỗ trợ NEON và FPU. Bộ vi xử lý này có bộ nhớ đệm lệnh (I-Cache) 32 KB, bộ nhớ đệm dữ liệu (D-Cache) 32 KB, bộ nhớ đệm L2 thống nhất 128 KB và một MCU độc lập với bộ nhớ đệm 16 KB. Tài liệu hướng dẫn chính thức không nêu rõ tần số xung nhịp; thông thường, cấu hình SDK là 1,2 GHz. Cơ chế lập lịch dị cấu trúc (heterogeneous scheduling) phân bổ ứng dụng chính cho nhân A7 và các ngắt thời gian thực tiêu thụ điện năng thấp cho MCU. Trong chế độ ngủ, nhân A7 có thể bị tắt nguồn trong khi chỉ MCU vẫn hoạt động. Hiệu năng phụ thuộc vào chiến lược quản lý miền cấp điện (power-domain strategy). |
Hỗ trợ cơ chế ngủ–đánh thức tiêu thụ điện năng thấp AOV (Always-On Vision), cân bằng giữa hiệu năng tính toán của hệ thống và tuổi thọ pin. |
NPU |
Bộ tăng tốc phần cứng mạng nơ-ron (neural-network accelerator) hỗ trợ lượng tử hóa hỗn hợp ở độ chính xác INT4, INT8 và INT16, đồng thời hỗ trợ chuyển đổi mô hình từ TensorFlow, PyTorch, Caffe, TFLite và ONNX-NN. Hiệu năng đỉnh lý thuyết đạt 1 TOPS. Hiệu năng thực tế khoảng 0,5 TOPS trên chip RV1106G2, trong khi RV1106G3 có thể đạt đầy đủ 1 TOPS. Hiệu năng suy luận (inference performance) bị giới hạn bởi dung lượng bộ nhớ, băng thông và kích thước mô hình. |
Chay AI canh vien tai cho de phat hien con nguoi, phat hien doi tuong va nhan dang khuon mat. Gia toc phan cung giam tai cho CPU va loai bo su can thiet phai su dung tinh toan tren may chu. |
Isp |
ISP phan cung voi hai dau vao MIPI-CSI/LVDS va mot dau vao DVP, ho tro toi ba camera. Cac chuc nang xu ly anh bao gom HDR-MGE, 3DNR/2DNR, 3A, LSC, lam sach khoi (defogging) va chinh lech anh (distortion correction). RV1106G2 ho tro toi 5MP@30FPS. RV1106G3 va RV1106 ho tro toi 8MP@15FPS. Toc do khung hinh bi gioi han boi bang thong, tieu thu cong suat va duong dan ma hoa. |
Xu ly truoc anh duoi dieu kien chieu sang phuc tap va xuat ra cac dong YUV chat luong cao de ma hoa va suy luan AI, giam tai cho phan mem xu ly anh. |
Bộ mã hóa video VENC |
Bộ mã hóa phần cứng hỗ trợ H.264 High Profile, H.265 Main Profile và JPEG, với sáu chế độ kiểm soát tốc độ bit và tốc độ bit tối đa 60 Mbps. RV1106G2 hỗ trợ 5MP ở 30 FPS; RV1106G3 và RV1106 hỗ trợ tối đa 8MP ở 15 FPS. Chụp JPEG hỗ trợ tối đa 4MP ở 60 FPS, với nhiều luồng đầu ra. |
Nén phần cứng giải phóng tài nguyên CPU cho các chức năng bảo mật như xem trước nhiều luồng, ghi hình cục bộ và bắt sự kiện. |
Bộ xử lý video thông minh RKIVE |
Đơn vị xử lý thị giác chuyên dụng trên phần cứng với các toán tử GMM, Canny, CCL, dòng quang học (optical-flow), lọc và hình thái học (morphology). Phát hiện chuyển động và phân đoạn tiền cảnh được thực hiện trên phần cứng với mức sử dụng CPU tối thiểu. Tốc độ khung hình xử lý tuân theo giới hạn đầu ra của ISP. |
Thực hiện phát hiện thay đổi cảnh và trích xuất tiền cảnh trên phần cứng, giảm tải CPU cho việc phát hiện thay đổi hình ảnh trong chế độ AOV tiết kiệm năng lượng. |
Hệ thống con bộ nhớ |
RV1106G2 tích hợp 1Gb (128MB) DDR3L trong SIP.
|
Giai phap SIP loai bo cac thiet bi DDR ben ngoai va viec dan day tren PCB, giam chi phi BOM. Phien ban BGA ho tro cac he thong nhieu may anh va thiet bi tham nhin cao cap chay cac thuat toan phuc tap. |
Quản lý năng lượng |
Nhieu mien nguon dien doc lap ho tro viec chuyen doi tung mien nguon rieng biet va nhieu nguon ngu va tinh tao. Du lieu ky thuat khong cung cap so lieu chinh thuc ve cong suat. Do luong ky thuat cho thay khoang 500 mW trong che do hoat dong day du va khoang 40 mW o che do cho doi AOV. Cac uoc tinh truoc day la 0.8 W va 0.1 W can duoc thay the bang cac so do tu mau san pham thuc te. |
Ho tro danh gia thoi gian chay thuc te cho cac san pham dung pin lithium va pin mat troi, dong thoi giup xac dinh cac chien luoc chuyen doi mien nguon cho hoat dong AOV tieu thu cong suat thap. |
Gói hàng |
RV1106G2/G3 sử dụng gói QFN128 có kích thước 12,3 x 12,3 mm với khoảng cách chân 0,35 mm và xếp hạng MSL3. RV1106 sử dụng gói BGA313 có kích thước 14 x 11 mm với khoảng cách bóng 0,6 mm. Việc tản nhiệt của QFN phụ thuộc vào việc nối đất đầy đủ phần E-PAD ở mặt đáy. BGA cung cấp khả năng mở rộng ngoại vi tốt hơn, trong khi QFN nhỏ gọn hơn nhưng có khoảng dự phòng nhiệt thấp hơn. |
RV1106G2/G3 phù hợp với các sản phẩm nhỏ gọn như chuông cửa và camera pin nhỏ. RV1106 hướng đến các thiết kế đa camera có khả năng mở rộng. Bố trí phần cứng phải đảm bảo nối đất đúng cách và tản nhiệt hiệu quả. |
Hoat dong ca ngay voi thoi gian tru khi dai phu thuoc vao AOV (Luon bat video), nhieu mien nguon dien doc lap va co che tinh tinh nhanh. Thiet ke phan cung phai tuan thu cac gia tri gioi han tuyet doi va dieu kien hoat dong khuyen nghi cua chip.
Chế độ AOV và Lập lịch cấp điện nhiều cấp độ: AOV kết hợp việc chụp ảnh liên tục với tốc độ khung hình thấp cùng kích hoạt sự kiện dựa trên trí tuệ nhân tạo nhằm đáp ứng nhu cầu giám sát liên tục của các thiết bị chạy bằng pin. Trong thời gian chờ dài, MCU quản lý cảm biến và bộ đệm hình ảnh trong khi Cortex-A7 và NPU chuyển sang chế độ ngủ sâu. Chỉ các miền cấp điện thiết yếu vẫn hoạt động, cho phép chụp và mã hóa ở tốc độ 1 khung hình/giây. Khi phát hiện người, phương tiện hoặc mục tiêu khác, một ngắt phần cứng sẽ đánh thức toàn bộ chip và chuyển hệ thống sang chế độ ghi hình ở tốc độ khung hình bình thường cùng suy luận AI.
Chế độ hoạt động |
Trạng thái lõi |
Công suất điển hình |
Hiệu năng pin (5200 mAh) |
Chế độ chờ AOV |
MCU RISC-V đang chạy; A7/NPU đang ngủ |
Khoảng 40 mW (tham chiếu kỹ thuật) |
Khoảng 14 ngày không có ánh sáng mặt trời (tham chiếu nguyên mẫu) |
Đánh thức do sự kiện |
A7/NPU chạy ở tốc độ tối đa với mã hóa ở tốc độ khung hình bình thường |
Tải năng động |
Phụ thuộc vào tần suất kích hoạt bởi sự kiện |
Ghi âm liên tục |
Tất cả các module đang hoạt động |
Năng lượng động |
Đề xuất sử dụng nguồn điện bên ngoài |
Tài nguyên phần cứng giao diện đầu vào video:
Sau xử lý trước hình ảnh, ISP xuất dữ liệu YUV. VENC hỗ trợ tất cả sáu chế độ điều khiển tốc độ được nêu trong bảng thông số kỹ thuật.
Các tùy chọn bộ nhớ khởi động: SPI Flash, eMMC 4.51 và SD/MMC. Firmware có thể được tải xuống qua USB hoặc UART.
Bộ nhớ trên chip: 256KB SRAM chia sẻ, 8KB PMU-SRAM, 20KB Boot ROM và 8K-bit OTP.
2 Bo công cụ RKNN và triển khai lượng tử hóa mô hình: Đơn vị xử lý thần kinh (NPU) hỗ trợ lượng tử hóa hỗn hợp ở độ phân giải INT4, INT8 và INT16, trong khi RKNN-Toolkit2 thực hiện chuyển đổi mô hình. Lượng tử hóa INT8 cân bằng giữa độ chính xác và tốc độ, còn INT4 giảm kích thước mô hình. Tỷ lệ phát hiện đối tượng của PaddleDetection đạt 25 khung hình/giây là kết quả thử nghiệm kỹ thuật. Việc triển khai yêu cầu nạp mô hình RKNN vào vùng nhớ đệm DDR và gọi giao diện suy luận thông qua API C/C++.
3 Tối ưu hóa thư viện thị giác nhẹ: Các hệ thống nhúng sử dụng thư viện OpenCV-mobile được tinh giản, loại bỏ các thành phần giao diện người dùng (GUI) nhằm giảm kích thước và tăng tốc độ khởi động. Kiến trúc lai kết hợp tiền xử lý bằng thư viện nhẹ với suy luận trên NPU giúp giảm mức sử dụng CPU và phù hợp với ngân sách điện năng của thiết bị có thời gian chờ dài.
Sân khấu |
Mô-đun lõi |
Khung phát triển hoặc công cụ |
Tối ưu hóa hiệu suất |
Ràng buộc phần cứng |
Chụp Ảnh |
VI + MIPI-CSI/DVP |
SDK MPP |
Gắn kết các đường dẫn phần cứng để giảm chi phí sao chép bộ nhớ |
Hỗ trợ tối đa ba đầu vào cảm biến đồng bộ. RV1106G2 hỗ trợ tối đa 5 MP ở tốc độ 30 khung hình/giây. |
Cải thiện hình ảnh |
Isp |
Cấu hình đăng ký phần cứng |
Bật tăng tốc hình ảnh phần cứng như HDR và 3DNR |
Phần cứng ISP hỗ trợ phân chia thời gian cho tối đa bốn cảm biến. |
Mã hóa video |
VENC |
API VENC MPP |
Cấu hình sáu chế độ kiểm soát tốc độ bit và bật mã hóa thông minh |
Tốc độ bit mã hóa tối đa là 60 Mbps. |
Suy luận trí tuệ nhân tạo (AI inference) |
NPU |
RKNN-Toolkit2 |
Sử dụng lượng tử hóa hỗn hợp INT4, INT8 và INT16 |
Tài nguyên bộ nhớ bị giới hạn bởi cấu hình DDR tích hợp SIP hoặc DDR bên ngoài. |
Xử lý hình ảnh |
CPU Cortex-A7 |
OpenCV-mobile
|
Loại bỏ các mô-đun phần mềm không cần thiết để giảm tải hệ thống |
Ở chế độ ngủ AOV, ưu tiên tắt nguồn CPU. |
Tài nguyên phần cứng: Bộ vi mạch tích hợp bộ điều khiển và bộ thu phát Ethernet 10/100M (giao diện RMII). Giao diện SDIO 3.0 hỗ trợ mô-đun Wi-Fi và Bluetooth bên ngoài, và cổng USB 2.0 OTG được tích hợp sẵn. Tài nguyên ngoại vi bao gồm năm giao diện I2C, hai giao diện SPI, sáu giao diện UART và một giao diện âm thanh I2S.
Ethernet cung cấp cơ sở hạ tầng có dây đáng tin cậy. Một mô-đun Wi-Fi 6 và Bluetooth 5.2 bên ngoài có thể được kết nối qua SDIO để triển khai không dây linh hoạt. Báo cáo nhịp tim và tái kết nối tự động đảm bảo liên kết mạng luôn khả dụng.
Smart Encoding 2.0 la mot thuat toan phan mem SDK o tang cao, ho tro dieu chinh ty le bit tu dong. So voi che do CBR truyen thong voi ty le bit co dinh, no co the giam su dung bang thong va yeu cau luu tru.
He thong am thanh tich hop bo ma giai am cung cap phan cung voi ADC 24-bit hai kenh va DAC don kenh. Ty le tin hieu tren nhieu dien hinh la 90 dB, va ca dau vao micro vi phan va dau vao micro don duoc ho tro.
Buildroot duoc su dung de xay dung he thong Linux nhung, toi uu hoa nhan va dich vu ung dung, va ho tro cap nhat firmware qua OTA.
Chip bao gồm một bộ xử lý bảo mật phần cứng đầy đủ với đơn vị mật mã phần cứng hỗ trợ các thuật toán SHA-1, SHA-256, AES, DES, TDES, RSA, ECC và SM2, cùng với bộ tạo số ngẫu nhiên thực và bộ OTP an toàn. TrustZone và khởi động an toàn được hỗ trợ. Các chức năng này cho phép mã hóa firmware, lưu trữ khóa an toàn và cách ly miền bảo mật phần cứng–phần mềm nhằm bảo vệ quyền riêng tư trong các sản phẩm bảo mật.
Yêu cầu cốt lõi |
Cấu Hình Khuyến Nghị |
Các giao diện chính |
Ràng buộc phần cứng |
|
IPC tiết kiệm năng lượng hoặc chuông cửa thông minh |
Chế độ chờ dài và khả năng quan sát ban đêm |
RV1106G2
|
MIPI-CSI,
|
Tối đa 5 MP ở tốc độ 30 khung hình/giây |
Máy quét mã vạch quang công nghiệp |
Bắt ảnh tốc độ cao và thu thập theo kích hoạt |
RV1106G3
|
MIPI-CSI, UART, GPIO |
Tối đa 8 MP ở 15 khung hình/giây |
Bán lẻ thông minh hoặc kệ thông minh |
Phân tích thị giác đa camera |
RV1106 BGA
|
Dual MIPI-CSI,
|
Yêu cầu thiết kế nguồn DDR nghiêm ngặt |
Hệ thống giám sát người lái trong khoang xe (DMS) hoặc camera hành trình (Dashcam) |
Hoạt động ở dải nhiệt độ rộng |
RV1106G3 |
MIPI/DVP, Ethernet, USB OTG |
Nhiệt độ môi trường: -20 đến 85 °C; nhiệt độ điểm nối: ≤125 °C |
Chúng tôi cung cấp thiết kế phần cứng PCBA dựa trên RV1106 và giải pháp thị giác hoàn chỉnh tùy chỉnh, bao gồm thiết kế sơ đồ mạch và bảng mạch in (PCB), lựa chọn linh kiện, điều chỉnh trình điều khiển mức thấp, chuyển đổi và gỡ lỗi thuật toán, cũng như tích hợp hệ thống hoàn chỉnh. Để được hỗ trợ kỹ thuật về lựa chọn chip, thiết kế phần cứng, di chuyển phần mềm, tối ưu hóa hiệu năng hoặc các dự án tùy chỉnh, vui lòng liên hệ với chúng tôi: [email protected]
Tin nóng2026-09-09
2026-09-02
2026-08-28
2026-08-26
2026-08-24
2026-08-19
EN
