Trải nghiệm khi dùng Real-ESRGAN
Cách dễ nhất README đưa ra là tải bản chạy sẵn Real-ESRGAN-ncnn-vulkan cho Windows, Linux hoặc macOS ở mục Portable executable. Bạn giải nén, mở Terminal hoặc PowerShell trong thư mục đó và chạy một lệnh để phóng to ảnh. Bản này đã gói sẵn mọi file cần thiết, không cần cài CUDA hay PyTorch.
Bạn chỉ định ảnh vào, ảnh ra và tên mô hình bằng tham số dòng lệnh. Chẳng hạn mô hình mặc định phóng gấp 4 lần cho ảnh thật, còn các mô hình khác tối ưu cho ảnh anime hoặc video hoạt hình. Kết quả là một file ảnh lớn hơn và ít vỡ hạt hơn, bạn mở ra so với ảnh gốc.
Nếu bạn quen Python, README hướng dẫn clone kho mã và chạy script inference_realesrgan.py, hỗ trợ ảnh có kênh trong suốt, ảnh xám, ảnh 16-bit, chia khối để tiết kiệm bộ nhớ và kết hợp GFPGAN để sửa khuôn mặt. Còn nếu ngại dòng lệnh, ứng dụng Upscayl hay các giao diện khác dùng cùng nền là lựa chọn dễ hơn.
Tính năng nổi bật
Phóng ảnh thật và ảnh anime
Có mô hình riêng cho ảnh thông thường, ảnh minh hoạ anime và video hoạt hình.
Bản chạy sẵn không cần cài môi trường
Gói ncnn-vulkan di động dùng card đồ hoạ qua Vulkan, tránh phải cài CUDA hay PyTorch.
Sửa khuôn mặt kèm theo
Có thể kết hợp GFPGAN trong script Python để làm rõ mặt người khi phóng ảnh.
Chia khối để đỡ tốn bộ nhớ
Tuỳ chọn tile chia ảnh thành mảnh nhỏ, giúp ảnh lớn không làm hết bộ nhớ card đồ hoạ.
Chỉnh khử nhiễu
Mô hình realesr-general-x4v3 có tuỳ chọn -dn để cân bằng giữa khử nhiễu và độ chi tiết.
Có thể huấn luyện thêm
Dành cho người nghiên cứu: README có tài liệu tinh chỉnh mô hình trên dữ liệu của riêng bạn.
Tận dụng Real-ESRGAN vào việc gì?
Chủ shop bán hàng online
Làm nét ảnh sản phẩm nhỏ
Chạy hàng loạt thư mục ảnh qua một lệnh để có ảnh lớn hơn trước khi đăng.
Người thích anime, hoạ sĩ
Phóng ảnh anime, minh hoạ
Dùng mô hình anime để phóng tranh vẽ mà giữ nét sạch, không bị mịn như ảnh chụp.
Người làm YouTube, dựng phim
Làm tư liệu cho video
Phóng hình nền hoặc ảnh tư liệu nhỏ lên độ phân giải đủ dùng cho khung hình video.
Lập trình viên, nhà nghiên cứu
Nền cho dự án xử lý ảnh
Gắn Real-ESRGAN vào quy trình xử lý ảnh bằng Python hoặc tinh chỉnh với dữ liệu riêng.
Cần chuẩn bị gì?
- Bản ncnn-vulkan: card đồ hoạ hỗ trợ Vulkan; không cần cài thêm CUDA hay PyTorch.
- Bản Python: Python 3.7 trở lên và PyTorch 1.7 trở lên theo README (nên dùng Anaconda hoặc Miniconda).
- Card NVIDIA giúp chạy nhanh với bản Python, nhưng dung lượng VRAM cần thiết phụ thuộc kích thước ảnh; dùng tuỳ chọn tile nếu thiếu bộ nhớ.
Hướng dẫn cài đặt chi tiết
Cài trên Bản chạy sẵn (ncnn)
Mở mục Portable executable files trong README hoặc trang Releases của dự án và tải gói cho hệ điều hành của bạn (Windows, Linux, macOS).
https://github.com/xinntao/Real-ESRGAN/releasesGiải nén vào một thư mục, mở PowerShell tại đó rồi chạy lệnh phóng ảnh. Ví dụ trên Windows theo README:
.\realesrgan-ncnn-vulkan.exe -i input.jpg -o output.png -n realesrgan-x4plusChọn mô hình khác bằng tham số -n, ví dụ realesrgan-x4plus-anime cho ảnh anime hoặc realesr-animevideov3 cho video hoạt hình.
Cài trên Python
Cài Python và PyTorch, tạo môi trường riêng (nên dùng conda), rồi tải mã nguồn.
git clone https://github.com/xinntao/Real-ESRGAN.git cd Real-ESRGANCài các gói phụ thuộc theo README.
pip install basicsr pip install facexlib pip install gfpgan pip install -r requirements.txt python setup.py developTải file trọng số mô hình (ví dụ RealESRGAN_x4plus.pth) từ trang Releases vào thư mục weights rồi chạy script inference_realesrgan.py. Xem tham số bằng --help.
Dùng thử lần đầu
Chuẩn bị một ảnh nhỏ, mờ, đặt cùng thư mục với bản chạy sẵn và đặt tên input.jpg.
Mở PowerShell trong thư mục đó và chạy lệnh phóng ảnh với mô hình mặc định.
.\realesrgan-ncnn-vulkan.exe -i input.jpg -o output.pngMở output.png và so sánh với ảnh gốc. Nếu là ảnh anime, thử lại với mô hình anime.
Muốn xử lý nhiều ảnh, trỏ -i và -o tới thư mục thay vì từng file; công cụ hỗ trợ đầu vào là thư mục theo README.
Mẹo dùng hay
- Nếu ảnh lớn gây lỗi hết bộ nhớ, thử tham số -t để đặt kích thước khối nhỏ hơn.
- Bản ncnn-vulkan không hỗ trợ đầy đủ như script Python, ví dụ tham số outscale; cần phóng tuỳ ý thì dùng script.
- Người không quen dòng lệnh có thể dùng Upscayl, ứng dụng có giao diện dùng chung nền Real-ESRGAN.
Lưu ý và hạn chế
- Dự án này chủ yếu là mã nghiên cứu và các bản phát hành cũ; lần cập nhật cuối trong dữ liệu kho là tháng 8 năm 2024, nên có thể không theo kịp phiên bản Python hay PyTorch mới.
- AI phóng ảnh sẽ tự suy ra chi tiết, nên khuôn mặt, chữ hay hoa văn có thể sai khác so với bản gốc; không dùng để làm giả giấy tờ hay bằng chứng.
- Nếu phóng ảnh hay video không thuộc bản quyền của bạn, hãy kiểm tra quyền sử dụng trước khi đăng lại.
Câu hỏi thường gặp
Có miễn phí không?
Có. Mã nguồn dùng giấy phép BSD-3-Clause, miễn phí để dùng. Hãy kiểm tra giấy phép từng mô hình đi kèm nếu bạn dùng thương mại.
Không biết lập trình thì dùng thế nào?
Bạn có thể tải gói chạy sẵn ncnn-vulkan và gõ một lệnh duy nhất, hoặc dùng ứng dụng giao diện như Upscayl, vốn dùng chung nền Real-ESRGAN.
Có phóng được video không?
Có mô hình realesr-animevideov3 cho video hoạt hình; Với video thông thường, bạn có thể xem Video2X, công cụ chuyên cho việc này.
Tải mã nguồn về máy
Nếu bạn muốn xem hoặc sửa mã nguồn, mở Terminal (trên Windows là PowerShell) và chạy lệnh dưới. Máy cần cài sẵn Git.
git clone https://github.com/xinntao/Real-ESRGAN.gitRepo tương tự nên xem
Upscayl
upscayl / upscayl
Phóng to ảnh mờ, ảnh nhỏ lên nét hơn bằng AI, cài như phần mềm thường, bấm vài nút
Video2X
k4yt3x / video2x
Phóng to và làm mượt video bằng AI, có bản cài cho Windows với giao diện đồ hoạ
GFPGAN
TencentARC / GFPGAN
AI khôi phục khuôn mặt trong ảnh cũ, ảnh mờ, ảnh do AI tạo ra cho rõ nét hơn