Semantic Chunking - 3 Methods for Better RAG

Опубликовано: 01 Июнь 2024
на канале: James Briggs
13,841
373

Semantic chunking allows us to build more context-aware chunks of information. We can use this for RAG, splitting video and audio, and much more.

In this video, we will use a simple RAG-focused example. We will learn about three different types of chunkers: StatisticalChunker, ConsecutiveChunker, and CumulativeChunker.

At the end, we also discuss semantic chunking for video, such as for the new gpt-4o and other multi-modal use cases.

📌 Code:
https://github.com/aurelio-labs/seman...

⭐️ Article:
https://www.aurelio.ai/learn/semantic...

👋🏼 AI Consulting:
https://aurelio.ai

👾 Discord:
  / discord  

Twitter:   / jamescalam  
LinkedIn:   / jamescalam  

#ai #artificialintelligence #chatbot #nlp

00:00 3 Types of Semantic Chunking
00:42 Python Prerequisites
02:44 Statistical Semantic Chunking
04:38 Consecutive Semantic Chunking
06:45 Cumulative Semantic Chunking
08:58 Multi-modal Chunking


Смотрите видео Semantic Chunking - 3 Methods for Better RAG онлайн без регистрации, длительностью часов минут секунд в хорошем качестве. Это видео добавил пользователь James Briggs 01 Июнь 2024, не забудьте поделиться им ссылкой с друзьями и знакомыми, на нашем сайте его посмотрели 13,841 раз и оно понравилось 373 людям.