Duyệt tài liệu
Hướng dẫn
Xây dựng tính năng tìm kiếm, nghiên cứu cùng tác nhân hoặc thu thập dữ liệu video và nội dung đa phương tiện. Bắt đầu từ kết quả bạn cần.
Trên trang này
Bạn muốn xây dựng hoặc làm gì?
Thêm tìm kiếm vào ứng dụng
Trả về nguồn web từ backend và cung cấp chức năng tìm kiếm dưới dạng công cụ cho tác nhân.
Node.js · HTTP
GET /search + search formNghiên cứu một chủ đề cùng tác nhân
Thu thập nguồn web và video, rồi đưa bằng chứng đã chọn cho tác nhân để so sánh kèm trích dẫn.
Python · Tác nhân hoặc mô hình của bạn
evidence.json + brief.mdChuẩn bị một YouTube Tóm tắt bằng trích dẫn
Lấy phụ đề có sẵn và yêu cầu mô hình tóm tắt kèm liên kết đến mốc thời gian.
Python · Mô hình của bạn
video-evidence/<video>-<language>-<track>.jsonTạo một cuộc họp nghiên cứu hàng ngày
So sánh nguồn giữa các lần chạy, rồi viết bản tin với trích dẫn đã kiểm tra.
CLI · Python · model
sources.json + briefing.mdChuyển nội dung đa phương tiện đến ứng dụng
Chuyển MP4 đến kho S3 riêng tư, kiểm tra dữ liệu tệp và cung cấp liên kết tải xuống ngắn hạn cho ứng dụng.
Python · CLI · Node.js · S3
Tệp đã xác minh + liên kết tải xuốngLàm giàu danh sách YouTube Ảnh động
Truy vấn mỗi video riêng biệt một lần, rồi ghép siêu dữ liệu và kết quả vào bản ghi gốc của ứng dụng.
CLI · Node.js
enriched.ndjsonTìm và chuẩn bị dữ liệu phù hợp
- Google Search Thực hành tốt nhất
Điều chỉnh truy vấn, chọn thị trường và lưu các nguồn đã xếp hạng, loại bỏ trùng lặp.
- YouTube Data Thực hành tốt nhất
Chọn video, kiểm tra ngôn ngữ phụ đề và giữ lại bằng chứng có mốc thời gian.
- YouTube Download Thực hành tốt nhất
Chọn video, âm thanh hoặc đoạn trích, cấu hình kho lưu trữ và lấy bản ghi giao nhận.
Chạy, lưu và khôi phục quy trình
- Async & Yêu cầu hàng loạt
Tiếp tục xử lý nền từ ID tác vụ đã lưu và thu thập kết quả của từng mục trong batch.
- Bulk xử lý tập tin
Xử lý tệp ID video và thu thập kết quả hoặc lỗi của từng mục.
- Chạy tác vụ tác vụ tác nhân lặp lại
Tái sử dụng quyền truy cập của chủ tài khoản và trạng thái đã lưu khi nền tảng lên lịch lần chạy tiếp theo.
- Lưu và sử dụng lại kết quả
Lưu trữ đầu vào, kết quả, trích dẫn và mức sử dụng để tiến trình khác tái sử dụng.
- Phục hồi một sự tích hợp tác nhân
Kiểm tra lần chạy bị gián đoạn và khôi phục kết quả trước khi quyết định thử lại.
- Triển khai FlashData Nạp công việc
Cấu hình máy chủ hoặc container, rồi kiểm tra quyền truy cập và khả năng tái sử dụng kết quả sau khi khởi động lại.
- Đo API hoa/ thường và tải xuống
Chạy một nghiên cứu đo lường, tóm tắt các mẫu đã lưu, hoặc chuyển thời gian vào kho.
Hướng dẫn yt-dlp và khắc phục sự cố
Cách sử dụng yt-dlp
Hướng dẫn tải xuống hằng ngày ưu tiên Linux, gồm cài đặt bản nightly, chọn định dạng, lấy phụ đề, tạo tập dữ liệu và tiếp tục thu thập khi bị gián đoạn.
Khắc phục lỗi 403 Forbidden trong yt-dlp
Cập nhật bản nightly, giảm số yêu cầu đồng thời, kiểm tra Deno rồi thử cookie và địa chỉ IP đầu ra hoạt động.
Khắc phục lỗi “Sign in to confirm you’re not a bot” trong yt-dlp
Xử lý “Sign in to confirm you’re not a bot” bằng bản nightly, Deno, phiên hợp lệ và địa chỉ IP đầu ra hoạt động.
Khắc phục lỗi 429 Too Many Requests trong yt-dlp
Tạm dừng tác vụ trên IP đầu ra bị giới hạn, giảm tần suất yêu cầu trích xuất và phụ đề, rồi chạy lại một tiến trình.
API Python của yt-dlp
Ví dụ Python có thể chạy để tải xuống, lấy siêu dữ liệu, tạo tập dữ liệu AI và tiếp tục tác vụ bị gián đoạn.
Các lệnh yt-dlp dùng hằng ngày
Sao chép lệnh cho video, âm thanh, phụ đề, tập dữ liệu và tiếp tục thu thập.
So sánh FlashData và yt-dlp
So sánh tính năng, đối chiếu cấu hình hiện có và chuyển quy trình tạo tập dữ liệu video sang dịch vụ lưu trữ đám mây được quản lý.