Mixed Attention & LLM Context | Data Brew | Episode 35 Data Brew By Databricks podcast

Artwork

Databricks Data Analytics Apache Spark Delta Lake Machine Learning Data Engineering Artificial Intelligence Tech Data Science Science Lifestyle Podcasting Education

Sisällön tarjoaa Databricks. Databricks tai sen podcast-alustan kumppani lataa ja toimittaa kaiken podcast-sisällön, mukaan lukien jaksot, grafiikat ja podcast-kuvaukset. Jos uskot jonkun käyttävän tekijänoikeudella suojattua teostasi ilman lupaasi, voit seurata tässä https://fi.player.fm/legal kuvattua prosessia.

Data Brew by Databricks « »
Mixed Attention & LLM Context | Data Brew | Episode 35

2M ago 39:11

Jaa

MP3•Jakson koti

Sisällön tarjoaa Databricks. Databricks tai sen podcast-alustan kumppani lataa ja toimittaa kaiken podcast-sisällön, mukaan lukien jaksot, grafiikat ja podcast-kuvaukset. Jos uskot jonkun käyttävän tekijänoikeudella suojattua teostasi ilman lupaasi, voit seurata tässä https://fi.player.fm/legal kuvattua prosessia.

In this episode, Shashank Rajput, Research Scientist at Mosaic and Databricks, explores innovative approaches in large language models (LLMs), with a focus on Retrieval Augmented Generation (RAG) and its impact on improving efficiency and reducing operational costs.
Highlights include:
- How RAG enhances LLM accuracy by incorporating relevant external documents.
- The evolution of attention mechanisms, including mixed attention strategies.
- Practical applications of Mamba architectures and their trade-offs with traditional transformers.

… continue reading

35 jaksoa

#Databricks #Data Analytics #Apache Spark #Delta Lake #Machine Learning #Data Engineering #Artificial Intelligence #Tech #Data Science #Science #Lifestyle #Podcasting Education

Artwork

Mixed Attention & LLM Context | Data Brew | Episode 35

Data Brew by Databricks

70 subscribers

published 2M ago

Jaa

MP3•Jakson koti

Sisällön tarjoaa Databricks. Databricks tai sen podcast-alustan kumppani lataa ja toimittaa kaiken podcast-sisällön, mukaan lukien jaksot, grafiikat ja podcast-kuvaukset. Jos uskot jonkun käyttävän tekijänoikeudella suojattua teostasi ilman lupaasi, voit seurata tässä https://fi.player.fm/legal kuvattua prosessia.

In this episode, Shashank Rajput, Research Scientist at Mosaic and Databricks, explores innovative approaches in large language models (LLMs), with a focus on Retrieval Augmented Generation (RAG) and its impact on improving efficiency and reducing operational costs.
Highlights include:
- How RAG enhances LLM accuracy by incorporating relevant external documents.
- The evolution of attention mechanisms, including mixed attention strategies.
- Practical applications of Mamba architectures and their trade-offs with traditional transformers.

… continue reading

35 jaksoa

#Databricks #Data Analytics #Apache Spark #Delta Lake #Machine Learning #Data Engineering #Artificial Intelligence #Tech #Data Science #Science #Lifestyle #Podcasting Education

Semua episod

×

Tervetuloa Player FM:n!

Player FM skannaa verkkoa löytääkseen korkealaatuisia podcasteja, joista voit nauttia juuri nyt. Se on paras podcast-sovellus ja toimii Androidilla, iPhonela, ja verkossa. Rekisteröidy sykronoidaksesi tilaukset laitteiden välillä.

Kuuntele yli 500 aihetta

Pikakäyttöopas

Suosituimmat podcastit

Lindgren & Sihvonen

Urheilun ääni

Kasper ja Mikko - Suomen suosituin podcast

Kolme miestä ja elokuvasauva

Pyöreä pöytä

Uutisraportti podcast

Stressivapaa johtaja | Näkökulmia henkilökohtaiseen kasvuun

Vinkistä vihiä

Radio Wyrd Podcast

Apua/UKK | Päivitä | Mainostaa

Taide|Liike-elämä|Komedia|Talous|Viihde|Uutiset|Politiikka|Uskonto

Tiede|Jalkapallo|Urheilu|Tarinankerronta|Teknologia|True crime

Tekijänoikeudet 2025 | Sivukartta | Tietosuojakäytäntö | Käyttöehdot | | Tekijänoikeus

Kuuntele tämä ohjelma tutkiessasi