vcasas commited on
Commit
7e18e54
verified
1 Parent(s): 9b2f153

Update app.py

Browse files
Files changed (1) hide show
  1. app.py +22 -30
app.py CHANGED
@@ -1,40 +1,32 @@
1
  import os
2
- import requests
3
- from llama_index.core import VectorStoreIndex
4
- from llama_index.readers.file import PDFReader
5
- import gradio as gr
6
 
 
 
7
 
8
- # Funci贸n para descargar el archivo PDF desde una URL
9
- def download_pdf(url, destination):
10
- os.makedirs(os.path.dirname(destination), exist_ok=True)
11
- response = requests.get(url)
12
- with open(destination, 'wb') as f:
13
- f.write(response.content)
14
 
15
- # Funci贸n para crear el 铆ndice a partir del PDF
16
  def create_index_from_pdf(pdf_path):
17
- pdf_reader = PDFReader() # Inicializar el PDFReader sin la ruta del archivo
18
- documents = pdf_reader.load_data(file=pdf_path) # Pasar la ruta del archivo, no el archivo abierto
19
 
20
- # Crear el 铆ndice
21
- index = VectorStoreIndex.from_documents(documents)
22
- return index
23
 
24
- # Ruta del archivo PDF a descargar
25
- pdf_url = 'https://www.boe.es/buscar/pdf/1995/BOE-A-1995-25444-consolidado.pdf'
26
- pdf_path = './BOE-A-1995-25444-consolidado.pdf'
27
 
28
- # Descargar el PDF
29
- download_pdf(pdf_url, pdf_path)
30
 
31
- # Crear el 铆ndice a partir del PDF
32
  index = create_index_from_pdf(pdf_path)
33
-
34
- # Funci贸n de b煤squeda en el 铆ndice
35
- def search_pdf(query):
36
- response = index.query(query)
37
- return response
38
-
39
- # Interfaz Gradio
40
- gr.Interface(fn=search_pdf, inputs="text", outputs="text").launch()
 
1
  import os
2
+ from llama_index import VectorStoreIndex
3
+ from llama_index.readers import PDFReader
4
+ from sentence_transformers import SentenceTransformer
 
5
 
6
+ # Configurar el modelo de Hugging Face (local)
7
+ model = SentenceTransformer('all-MiniLM-L6-v2') # Puedes usar otro modelo que te guste
8
 
9
+ # Funci贸n para cargar el archivo PDF y extraer los documentos
10
+ def load_documents_from_pdf(pdf_path):
11
+ # Usamos PDFReader para leer el PDF
12
+ pdf_reader = PDFReader()
13
+ documents = pdf_reader.load_data(pdf_path)
14
+ return documents
15
 
16
+ # Crear el 铆ndice a partir del archivo PDF
17
  def create_index_from_pdf(pdf_path):
18
+ documents = load_documents_from_pdf(pdf_path)
 
19
 
20
+ # Obtener los embeddings del modelo Hugging Face
21
+ embeddings = model.encode([doc.text for doc in documents])
 
22
 
23
+ # Crear el 铆ndice con los embeddings generados
24
+ index = VectorStoreIndex.from_documents(documents, embed_model=embeddings)
25
+ return index
26
 
27
+ # Ruta del archivo PDF
28
+ pdf_path = 'ruta/a/tu/pdf.pdf'
29
 
30
+ # Crear el 铆ndice
31
  index = create_index_from_pdf(pdf_path)
32
+ print("脥ndice creado exitosamente.")