Channel: DLeX: AI Python
اگر این روزها با RAG Evaluation درگیر هستید یا قرار هست در آینده درگیرش بشید، این نوشتار فرمول های متریک های مورد استفاده در RAG Evaluation و معنای آن ها را بسیار بسیار ساده و با مثال های خیلی خوبی بیان کرده است:
@ai_python
البته با تکیه بر نام متریک ها در RAGAS که با TruLens کمی متفاوت است.
https://medium.com/@rupeshyadav153/evaluation-of-retrieval-augmented-generation-rag-using-ragas-on-human-annotated-and-synthetic-09c4b825c298
@ai_python
البته با تکیه بر نام متریک ها در RAGAS که با TruLens کمی متفاوت است.
https://medium.com/@rupeshyadav153/evaluation-of-retrieval-augmented-generation-rag-using-ragas-on-human-annotated-and-synthetic-09c4b825c298
Medium
Evaluation of RAG (Retrieval-Augmented Generation ) using RAGAs - On Human annotated and Synthetic…
You’ve built a Retrieval-Augmented Generation (RAG) application, showcasing its potential to answer questions by harnessing external…
لانگ فیوز، یکی از پلت فرم های LLM Engineering است که شامل قابلیت های زیر برای LLM Application ها هست :
👨💻 Traces
👨💻 Evals
👨💻 Prompt Management
👨💻 Metrics
حال، به تازگی، این پلت فرم اپن سورس با Llama Index هم Integrate شده.
@ai_python
جهت اطلاعات بیش تر به این پست مراجعه کنید.
حال، به تازگی، این پلت فرم اپن سورس با Llama Index هم Integrate شده.
@ai_python
جهت اطلاعات بیش تر به این پست مراجعه کنید.
Please open Telegram to view this post
VIEW IN TELEGRAM
مخزن پرامپت های لانگ چین :
@ai_python
https://smith.langchain.com/hub/rlm?organizationId=900eb658-009f-5a0d-aa45-336aa00d253f
@ai_python
https://smith.langchain.com/hub/rlm?organizationId=900eb658-009f-5a0d-aa45-336aa00d253f
یه پلت فرم باحال که باهاش می تونید خیلی راحت مایگریت کنید. برای مثال به نظر من لایبرری OpenAI خیلی سریع تغییر می کنه.
@ai_python
با استفاده از این پلت فرم وقتی که لایبرری OpenAI رو آپدیت می کنید، می تونید چک کنید که کجای کدتون نیاز به تغییر داره تا با ورژن جدید سازگار بشه. https://app.grit.io/
@ai_python
البته grit فقط برای OpenAI نیست. خیلی کتابخونه های دیگه رو هم پشتیبانی می کنه. مثل Next.js
یا حتی مهاجرت از Chai به Jest
https://app.grit.io/migrations/new
@ai_python
با استفاده از این پلت فرم وقتی که لایبرری OpenAI رو آپدیت می کنید، می تونید چک کنید که کجای کدتون نیاز به تغییر داره تا با ورژن جدید سازگار بشه. https://app.grit.io/
@ai_python
البته grit فقط برای OpenAI نیست. خیلی کتابخونه های دیگه رو هم پشتیبانی می کنه. مثل Next.js
یا حتی مهاجرت از Chai به Jest
https://app.grit.io/migrations/new
یک خانواده از LLM ها اکنون می توانند تا حدود زیادی نقش Decompile کدهای باینری را به عهده بگیرند :
@ai_python
این مدل ها بر روی 4 بیلیون توکن سورس کد زبان سی و اسمبلی کدهای متناظر Train شده اند.
Paper Link
@ai_python
این مدل ها بر روی 4 بیلیون توکن سورس کد زبان سی و اسمبلی کدهای متناظر Train شده اند.
Paper Link
دوتا جایگزین باحال برای متد دیسکرایب در Pandas:
@ai_python
https://www.blog.dailydoseofds.com/p/you-will-never-use-pandas-describe
@ai_python
https://www.blog.dailydoseofds.com/p/you-will-never-use-pandas-describe
این جا می تونید تلاش کنید که اطلاعات حریم خصوصی رو از چت بات های یک بانک فرضی با پرامپت های مختلف به دست بیارید :
@ai_python
https://huggingface.co/spaces/lighthouzai/guardrails-arena
@ai_python
https://huggingface.co/spaces/lighthouzai/guardrails-arena
huggingface.co
Guardrails Arena - a Hugging Face Space by lighthouzai
Discover amazing ML apps made by the community
یک رشته توییت عالی که تغییرات معماری ترانسفورمرها رو از سال ۲۰۱۷ تا الان بررسی کرده.
@ai_python
لینک مقاله های آرکایو در رشته توییت قرار داده شده است :
https://twitter.com/Muhtasham9/status/1772469982485438485?t=120YmOd_4f2HS-FnYib3qA&s=19
@ai_python
لینک مقاله های آرکایو در رشته توییت قرار داده شده است :
https://twitter.com/Muhtasham9/status/1772469982485438485?t=120YmOd_4f2HS-FnYib3qA&s=19
📌 برخی از مخاطبان این دوره
🏛 موسسه آموزش عالی آزاد توسعه
Please open Telegram to view this post
VIEW IN TELEGRAM
و یا برای کسب اطلاعات بیشتر کافیه به آیدی ما پیام بدی!
▪️▫️▪️▫️▪️▫️▪️▫️▪️▫️
🌐 وبسایت |
#استخدام_با_طعم_آموزش
Please open Telegram to view this post
VIEW IN TELEGRAM
می دونم که این چند وقت درباره RAG Evaluation با RAGAS زیاد مطلب گذاشتیم. اما مشکل اینجاست که به خصوص برای کسانی که تازه دارن شروع می کنن، توتوریال ها خیلی سریع قدیمی می شن و کدی که توشون توضیح داده می شه دچار تغییرات ریز می شه.
@ai_python
برای همین شاید خالی از لطف نباشه که این یکی توتوریال RAGAS رو که به نسبت جدید تر هست هم بذاریم توی کانال باشه :
https://www.youtube.com/live/Anr1br0lLz8?si=u7VafvMrJJMxbWza
@ai_python
برای همین شاید خالی از لطف نباشه که این یکی توتوریال RAGAS رو که به نسبت جدید تر هست هم بذاریم توی کانال باشه :
https://www.youtube.com/live/Anr1br0lLz8?si=u7VafvMrJJMxbWza
YouTube
RAG with LangChain v0.1 and RAG Evaluation with RAGAS (RAG ASessment) v0.1
GPT-4 Summary: Join us for an enlightening YouTube event that delves into the critical art of evaluating and improving production Large Language Model (LLM) applications. With the rise of open-source evaluation tools like RAG Assessment (RAGAS) and built…
✅ آموزش با نرم افزارها و زبــانهای R، Python و SQL
🔬 آموزش #آنلاین به همراه انجام پروژه و موردکاویهای واقعی
🏛 موسسه آموزش عالی آزاد توسعه
Please open Telegram to view this post
VIEW IN TELEGRAM
HTML Embed Code: