Example #1
0
    def contruir_corpus_experimento(self):
        '''Contruye el dataset'''
        c = Corpus()
        if self.tamanio == 'BI':
            busquedaInicial=leer_archivo(open(self.directorio+'bi.csv','r'), eliminar_primero=True)
            clasificados = leer_archivo(open(self.directorio+'clasificados.csv', 'r'),eliminar_primero=True)
        elif self.tamanio == 'Univ':
            busquedaInicial=leer_archivo(open(self.directorio++'dataPapers.csv','r'), eliminar_primero=True)
            clasificados = leer_archivo(open(self.directorio++'validacion.csv', 'r'),eliminar_primero=True)
        conjuntoA=leer_archivo(open(self.directorio+'a.csv','r'),eliminar_primero=True)
        conjuntoS=leer_archivo(open(self.directorio+'s.csv','r'),eliminar_primero=True)
        conjuntoJ=leer_archivo(open(self.directorio+'j.csv','r'),eliminar_primero=True)
        conjuntoO=leer_archivo(open(self.directorio+'o.csv','r'),eliminar_primero=True)

        xmls = self.obtener_xmls()

        #Archivos con los eid de los papers que van a conformar la red
        ##archivo_papers_red = dividir_archivo_fecha(open(self.directorio+'relevantes.csv'), open(self.directorio+'relevantesFecha.csv'), 2013)
        archivo_papers_red = open(self.directorio+'bi.csv')
        #Lista con los eid de los papers que van a conformar la red
        lista_papers_red = leer_archivo(archivo_papers_red, eliminar_primero=True)
        #Autores-papers de la red
        dicci_contruir_red = obtener_autores(xmls, lista_papers_red)
        #Aqué deberían estar todos los autores-papers del corpus
        dicci_todos_autores_papers = obtener_autores(xmls, leer_archivo(open(self.directorio+'bi.csv'), eliminar_primero=True))
        #c.construir_corpus(self.nombre_corpus, busquedaInicial, conjuntoA, conjuntoS, conjuntoJ, conjuntoO, clasificados,
        #                   conjuntos_red=dicci_contruir_red, diccionario_todos_autores=dicci_todos_autores_papers)
        c.construir_corpus(self.nombre_corpus, busquedaInicial, conjuntoA, conjuntoS, conjuntoJ, conjuntoO, clasificados)
Example #2
0
def xmls_to_red(xmls, nombre):
    '''Gernera un objeto Red, a partir de una lista de xml
    '''
    diccionario_autores = obtener_autores(xmls, leer_archivo(open('CVSs/relevantes.csv'), eliminar_primero=False))
    lista_autores = []
    lista_nombres = []
    for autor in diccionario_autores:
        lista_autores.append(diccionario_autores[autor])
        lista_nombres.append(autor)
    return Red(lista_autores, nombre, lista_nombres)
Example #3
0
def xmls_to_red(xmls, nombre):
    '''Gernera un objeto Red, a partir de una lista de xml
    '''
    diccionario_autores = obtener_autores(xmls)
    lista_autores = []
    lista_nombres = []
    for autor in diccionario_autores:
        lista_autores.append(diccionario_autores[autor])
        lista_nombres.append(autor)
    return Red(lista_autores, 'red', lista_nombres)
def prueba():
    c = Corpus()

    busquedaInicial=leer_archivo(open(c.DIRECTORIO_CVS+'bi.csv','r'), eliminar_primero=True)
    #busquedaInicial=leer_archivo(open(c.DIRECTORIO_CVS+'dataPapers.csv','r'), eliminar_primero=True)
    conjuntoA=leer_archivo(open(c.DIRECTORIO_CVS+'a.csv','r'),eliminar_primero=True)
    conjuntoS=leer_archivo(open(c.DIRECTORIO_CVS+'s.csv','r'),eliminar_primero=True)
    conjuntoJ=leer_archivo(open(c.DIRECTORIO_CVS+'j.csv','r'),eliminar_primero=True)
    conjuntoO=leer_archivo(open(c.DIRECTORIO_CVS+'o.csv','r'),eliminar_primero=True)
    clasificados = leer_archivo(open(c.DIRECTORIO_CVS+'clasificados.csv', 'r'),eliminar_primero=True)
    #clasificados = leer_archivo(open(c.DIRECTORIO_CVS+'validacion.csv', 'r'),eliminar_primero=True)
    xmls = [open('XMLs/xml0.xml'),open('XMLs/xml1.xml'),open('XMLs/xml2.xml'),open('XMLs/xml3.xml')]
    #c.construir_corpus(busquedaInicial, conjuntoA, conjuntoS, conjuntoJ, conjuntoO, clasificados, conjuntos_red=obtener_autores(xmls, leer_archivo(open('CVSs/relevantes.csv'), eliminar_primero=False)))
    #Archivos con los eid de los papers que van a conformar la red
    archivo_papers_red = dividir_archivo_fecha(open('CVSs/EISC/relevantes.csv'), open('CVSs/EISC/relevantesFecha.csv'), 2013)
    #Lista con los eid de los papers que van a conformar la red
    lista_papers_red = leer_archivo(archivo_papers_red, eliminar_primero=False)
    #Autores-papers de la red
    dicci_contruir_red = obtener_autores(xmls, lista_papers_red)
    #Aqué deberían estar todos los autores-papers del corpus
    dicci_todos_autores_papers = obtener_autores(xmls, leer_archivo(open('CVSs/EISC/bi.csv'), eliminar_primero=True))
    c.construir_corpus(busquedaInicial, conjuntoA, conjuntoS, conjuntoJ, conjuntoO, clasificados, c.DIRECTORIO_CVS,
                       conjuntos_red=dicci_contruir_red, diccionario_todos_autores=dicci_todos_autores_papers)
Example #5
0
def analisisView(request):
	print 'hola'
	diccionario_autores = obtener_autores([open('busqueda.xml')])
	lista_autores = []
	lista_nombres = []
	for autor in diccionario_autores:
		lista_autores.append(diccionario_autores[autor])
		lista_nombres.append(autor)
	r=Red(lista_autores, 'autores3', lista_nombres)
	nodos, aristas = r.generar_json()
	nodos1=json.dumps(nodos)
	aristas1= json.dumps(aristas)
	#return render(request, "GestionAnalisis/Analisis.html", {"nodos":nodos, "aristas":aristas})
	return render(request, "GestionAnalisis/Analisis.html", {"nodos":nodos1, "aristas":aristas1})
def corpus_univalle():
    c = Corpus()

    #busquedaInicial=leer_archivo(open(c.DIRECTORIO_CVS+'bi.csv','r'), eliminar_primero=True)
    busquedaInicial=leer_archivo(open(c.DIRECTORIO_CVS+'dataPapers.csv','r'), eliminar_primero=True)
    conjuntoA=leer_archivo(open(c.DIRECTORIO_CVS+'a.csv','r'),eliminar_primero=True)
    conjuntoS=leer_archivo(open(c.DIRECTORIO_CVS+'s.csv','r'),eliminar_primero=True)
    conjuntoJ=leer_archivo(open(c.DIRECTORIO_CVS+'j.csv','r'),eliminar_primero=True)
    conjuntoO=leer_archivo(open(c.DIRECTORIO_CVS+'o.csv','r'),eliminar_primero=True)
    #clasificados = leer_archivo(open(c.DIRECTORIO_CVS+'clasificados.csv', 'r'),eliminar_primero=True)
    clasificados = leer_archivo(open(c.DIRECTORIO_CVS+'validacion.csv', 'r'),eliminar_primero=True)
    xmls = [open('XMLs/xml0.xml'),open('XMLs/xml1.xml'),open('XMLs/xml2.xml'),open('XMLs/xml3.xml')]
    #c.construir_corpus(busquedaInicial, conjuntoA, conjuntoS, conjuntoJ, conjuntoO, clasificados, conjuntos_red=obtener_autores(xmls, leer_archivo(open('CVSs/relevantes.csv'), eliminar_primero=False)))
    c.construir_corpus(busquedaInicial, conjuntoA, conjuntoS, conjuntoJ, conjuntoO, clasificados, conjuntos_red=obtener_autores(xmls, leer_archivo(dividir_archivo_fecha(open('CVSs/relevantes.csv'), open('CVSs/relevantesFecha.csv'), 2011), eliminar_primero=False)), diccionario_todos_autores=obtener_autores(xmls, leer_archivo(open('CVSs/relevantes.csv'), eliminar_primero=False)))