AI xóa các đối tượng trong cảnh quay theo thời gian thực

Serhii Postupaiev, thành viên nhóm nghiên cứu ở Kaunas, cho biết: “Yolov8 hoạt động bằng cách chia hình ảnh video thành một lưới và dự đoán ranh giới, xác suất và các ô trong phạm vi phân đoạn của từng ô lưới, từ đó xác định các đối tượng không mong muốn, phân loại chúng và xóa chúng. họ” Đại học Công nghệ (Lithuania).

Yolov8 là viết tắt của “You Only Look Once” và xuất phát từ ý tưởng thể hiện những cảnh quay của các nhiếp ảnh gia hoặc đồ vật không phù hợp với bối cảnh. Nó được coi là hữu ích trong các sự kiện trực tiếp.

Postupaiev cho biết các tệp dữ liệu dùng để huấn luyện AI khá đa dạng, bao gồm hàng nghìn gigabyte nội dung được ghi lại, trong nhiều điều kiện và với kích thước, hình dạng và loại thiết bị khác nhau. Nhóm đã sử dụng Video Inpainting, một công cụ học sâu hoạt động giống như Spot Healing Brush để xóa những khuyết điểm không mong muốn trên hình ảnh trong phần mềm Photoshop.

Postupaiev cho biết: “Với AI, các chương trình phát sóng trực tiếp sẽ trở nên sạch sẽ và chuyên nghiệp hơn, không bị gián đoạn khi các kỹ thuật viên loại bỏ những thứ không nên có trong cảnh quay”. “Việc chỉnh sửa cũng trở nên dễ dàng hơn bằng cách quay video.”

Theo Postupaiev, Yolov8 ban đầu sẽ được sử dụng để tập trung vào các sân vận động bóng đá, chủ yếu để loại bỏ các chi tiết gây mất tập trung khi đưa tin trực tiếp. Trong thời gian tới, công nghệ này sẽ xuất hiện ở các lĩnh vực khác. Tuy nhiên, tập đoàn vẫn chưa công bố lộ trình thương mại hóa sản phẩm.

Năm ngoái, Viện Max Planck đã phát triển và phát hành phần mềm tương tự. Tuy nhiên, theo petapixelYolov8 được cho là mô hình AI hoàn chỉnh đầu tiên có khả năng xử lý trong khi ghi hình trực tiếp.

• YouTube yêu cầu người dùng sử dụng AI để loại bỏ video giả mạo
• Sử dụng bot để tiếp tục cuộc trò chuyện và khiến những kẻ lừa đảo phát điên
• Đối thủ của Sora tạo ra AI để tạo video thu hút sự chú ý
• OpenAI CTO: Một số công việc sáng tạo sẽ biến mất do AI
• AI của Google tạo ra âm thanh phù hợp với video