Skip to main content
Open In ColabOpen on GitHub

YouTube 文字记录

YouTube is an online video sharing and social media platform created by Google.

本笔记本介绍如何从 YouTube transcripts 加载文档。

from langchain_community.document_loaders import YoutubeLoader
API 参考：YoutubeLoader
%pip install --upgrade --quiet  youtube-transcript-api
loader = YoutubeLoader.from_youtube_url(
    "https://www.youtube.com/watch?v=QsYGlZkevEg", add_video_info=False
)
loader.load()

添加视频信息​

%pip install --upgrade --quiet  pytube
loader = YoutubeLoader.from_youtube_url(
    "https://www.youtube.com/watch?v=QsYGlZkevEg", add_video_info=True
)
loader.load()

添加语言偏好设置​

语言参数：它是一个按优先级降序排列的语言代码列表，默认为 en。

翻译参数：这是一个翻译偏好设置，您可以将可用的字幕翻译成您首选的语言。

loader = YoutubeLoader.from_youtube_url(
    "https://www.youtube.com/watch?v=QsYGlZkevEg",
    add_video_info=True,
    language=["en", "id"],
    translation="en",
)
loader.load()

获取带时间戳的文本块​

获取一个或多个Document对象，每个对象包含视频字幕的一个片段。可以指定片段的长度（以秒为单位）。每个片段的元数据都包含该视频在 YouTube 上的 URL，点击后将从该特定片段的开头开始播放视频。

transcript_format 参数：langchain_community.document_loaders.youtube.TranscriptFormat 值之一。在本例中为 TranscriptFormat.CHUNKS。

chunk_size_seconds 参数：一个整数，表示每段转录数据所代表的视频秒数。默认值为 120 秒。

from langchain_community.document_loaders.youtube import TranscriptFormat

loader = YoutubeLoader.from_youtube_url(
    "https://www.youtube.com/watch?v=TKCMw0utiak",
    add_video_info=True,
    transcript_format=TranscriptFormat.CHUNKS,
    chunk_size_seconds=30,
)
print("\n\n".join(map(repr, loader.load())))
API 参考：TranscriptFormat

来自 Google Cloud 的 YouTube 加载器​

先决条件​

  1. 创建一个 Google Cloud 项目或使用现有项目
  2. 启用 Youtube Api
  3. 为桌面应用程序授权凭据
  4. pip install --upgrade google-api-python-client google-auth-httplib2 google-auth-oauthlib youtube-transcript-api

🧑 导入 Google Docs 数据的说明​

默认情况下，GoogleDriveLoader 期望 credentials.json 文件为 ~/.credentials/credentials.json，但可以通过 credentials_file 关键字参数进行配置。token.json 也是如此。请注意，token.json 将在您首次使用该加载器时自动创建。

GoogleApiYoutubeLoader 可以从 Google Docs 文档 ID 列表或文件夹 ID 加载。您可以从 URL 中获取您的文件夹和文档 ID： 注意，根据您的设置，可能需要配置 service_account_path。详见此处了解更多详情。

# Init the GoogleApiClient
from pathlib import Path

from langchain_community.document_loaders import GoogleApiClient, GoogleApiYoutubeLoader

google_api_client = GoogleApiClient(credentials_path=Path("your_path_creds.json"))


# Use a Channel
youtube_loader_channel = GoogleApiYoutubeLoader(
    google_api_client=google_api_client,
    channel_name="Reducible",
    captions_language="en",
)

# Use Youtube Ids

youtube_loader_ids = GoogleApiYoutubeLoader(
    google_api_client=google_api_client, video_ids=["TrdevFK_am4"], add_video_info=True
)

# returns a list of Documents
youtube_loader_channel.load()