OlympHill
L

localGPTChat de documentos privado en línea, impulsado por LLMs locales en tu propio hardware.

4.7 (6)
Daniel NikulshynReseñado por Daniel Nikulshyn·Actualizado mayo de 2026

Resumen

localGPT es un proyecto de código abierto que te permite hacer preguntas sobre tus propios documentos utilizando modelos de lenguaje grandes, con todo el procesamiento ocurriendo en tu máquina local. Al mantener los embeddings, el almacenamiento de vectores y la inferencia fuera de línea, elimina la necesidad de enviar archivos confidenciales a servicios en la nube de terceros. La herramienta ingiere formatos de documentos comunes, divide e incrusta el contenido en una base de datos vectorial local, y luego utiliza un LLM elegido para generar respuestas fundamentadas basadas en pasajes recuperados. Admite aceleración por GPU en NVIDIA, Apple Silicon y configuraciones solo con CPU, lo que la hace adaptable a una variedad de hardware. Es especialmente adecuado para desarrolladores, investigadores y usuarios preocupados por la privacidad que desean una alternativa autoalojada a las herramientas de preguntas y respuestas de documentos basadas en la nube y que están cómodos trabajando con Python y entornos de línea de comandos.

Funciones clave

  • Generación de respuesta aumentada de recuperación en archivos locales
  • Base de vectores local para embeddings
  • Compatibilidad con PDF, textos y documentos de oficina
  • Modelos de LLM y modelos de embedding configurable
  • Aceleración de GPU opcional
  • Interface de línea de comandos y interfaz web básica

Precio

Modelo
Freemium
Valoración
4.7 / 5 (6)

Casos de uso

Chat sobre preguntas privado en Documentos Confidenciales

Preguntas pares de contratos, informes o archivos internos completamente off-line, asegurando que no se sale de su máquina al tiempo que a obtener respuestas generadas por LLMs en el suelo.

Ayudante de investigación off-line

Los investigadores pueden hacer entrar documentos PDF y papel hacia un almacenamiento de vectores local y hacer preguntas y buscar información sin depender de APIs de cloud.

Biblioteca de conocimientos auto-anfitriona para Desarrolladores

Los desarrolladores pueden construir una pipeline de RAG personalizable sobre documentación técnica, elegir sus preferidos modelos de LLM y modelos de embedding en sus propios GPU o hardware de CPU.

Flujos de trabajo AI locales de Apple Silicon

Los usuarios en Macs de M-series pueden ejecutar chat de documentos con aceleración de GPU localmente, y explorar las capacidades del LLM sin la membresía a servicios externos o externos.

Pros y contras

Ventajas

  • Corre completamente off-line para una fuerte privacidad de datos
  • Abierto y auto-anfitrión
  • Compatibilidad con varios formatos de documentos
  • Funciona con varios LLMs y embeddings locales
  • Compatibilidad con GPU, CPU y Apple Silicon

Contras

  • Requiere una configuración y dependencias técnicas
  • Desempeño dependiente de equipo local
  • No se incluye una interfaz de usuario de alto nivel de hospedaje out of the box
  • Tanto los modelos locales más pequeños pueden dar respuestas más débiles

Reseñas

4.7

Promedio de 6 valoraciones.

5
4
4
2
3
0
2
0
1
0

Inicia sesión para dejar una reseña.

NP

Nadia Petrova

Mar 6, 2026

Compared a few options

Evaluated this against two competitors. Where it wins: optional GPU acceleration and supports multiple document formats. Where it lags: smaller local models may give weaker answers. On balance the feature set — especially local vector database for embeddings — justifies the 5 stars for our use case.

Tomáš Novák

Tomáš Novák

Mar 1, 2026

Use it every day

Honestly didn't expect to like it this much. Command-line and basic web interface is exactly what I needed, and supports multiple document formats. I do wish no polished hosted UI out of the box, but I reach for it almost every day now and it just clicks.

DW

Devin Walker

Feb 27, 2026

Compared a few options

Evaluated this against two competitors. Where it wins: retrieval-augmented generation on local files and works with various local LLMs and embeddings. Where it lags: no polished hosted UI out of the box. On balance the feature set — especially command-line and basic web interface — justifies the 5 stars for our use case.

MB

Marcus Bell

Jan 3, 2026

Years in this space

I've evaluated a lot of these over the years. What stands out here is retrieval-augmented generation on local files — handled better than most — and supports multiple document formats. Performance depends on local hardware is my one real gripe. Worth the time if this is your use case.

AK

Aisha Khan

Dec 7, 2025

Use it every day

Honestly didn't expect to like it this much. Optional GPU acceleration is exactly what I needed, and gPU, CPU, and Apple Silicon compatible. but I reach for it almost every day now and it just clicks.

Daniel Schmidt

Daniel Schmidt

Jul 26, 2025

Skeptical, then convinced

I went in skeptical — most tools in this space overpromise. It actually delivers on command-line and basic web interface, and supports multiple document formats caught me off guard. Performance depends on local hardware is why this isn't a perfect score, still, I'd recommend giving it a real trial.

Preguntas y respuestas

What file types does localGPT support for ingestion?

It can process common formats such as PDFs, plain text files, and Microsoft Office documents, automatically splitting and embedding their contents for retrieval‑augmented generation.

Asked by Malik Rasheed · Sep 25, 2025

Is any data sent to external services when I query documents?

No. All document ingestion, embedding, vector storage, and answer generation happen locally, so sensitive files never leave your hardware.

Asked by Piotr Baranowski · Aug 13, 2025

Can I use my own LLM or embedding model with localGPT?

Yes, the tool is configurable; you can plug in any compatible local LLM and choose from various embedding models, allowing you to balance cost, speed, and answer quality.

Asked by Marisol Pena · Jun 27, 2025

What hardware do I need to run localGPT effectively?

localGPT can run on NVIDIA GPUs, Apple Silicon, or CPU‑only machines; GPU acceleration speeds up embedding and inference, but you can still use it on standard laptops with only a CPU, though performance will be slower.

Asked by Liam O’Connor · Jun 21, 2025

Hacer una pregunta

Alternativas a Agentes de Inteligencia Artificial