presentation

1.

Tech Media RAG MVP
Интеллектуальный поиск и анализ статей технологических СМИ
Cloud.ru — AI-агент для поиска и анализа статей (MVP)

2.

Проблема и цель
• Статей много, поиск по ключевым словам не покрывает смыслы и контекст
• Нужен агент: найти релевантные материалы, кратко резюмировать, дать ссылки на источники
• ЦА: студенты и специалисты, потребляющие IT-контент

3.

MVP функциональность
• RAG-пайплайн: эмбеддинги запроса → поиск в Qdrant → генерация ответа
• Аннотационное резюме с цитированием источников [n]
• Фильтры: автор, дата, тематика
• Доп. функции: рекомендации похожих публикаций; генерация вопросов/теста
• Интерфейс: Telegram-бот

4.

Архитектура (микросервисы)
• telegram-bot-service: UI/диалоги, фильтры, RPC в rag-service
• rag-service (GPU): retrieval + LLM summary/quiz/recommend (один CUDA-контекст)
• indexer-service: CSV → чанки → эмбеддинги → Qdrant upsert
• Транспорт: RabbitMQ RPC; Векторное хранилище: Qdrant

5.

Этичность и безопасность
• Точные ссылки на источники и запрет на 'галлюцинации' в промпте
• Защита данных: минимизация логируемого текста, trace_id для трассировки
• Аутентификация: Telegram user_id; Авторизация: allowlist
• Service-to-service: API key в AMQP headers

6.

Дальнейшее развитие
• Reranker и гибридный поиск (dense+sparse/BM25)
• Мультиязычность RU+EN, новые источники и дисциплины
• Загрузка PDF/HTML, планировщик переиндексации
• Кэширование и масштабирование компонентов