Ejemplo n.º 1
0
    #######################################################
    pef = readPef(file_handles['pef'], e_vcb, f_vcb)
    file_handles['pef'].close()

    #######################################################
    # Load pfe
    # col1 - e; col2 - f; col3 - count; col4 - prob p(f|e)
    #######################################################
    pfe = readPfe(file_handles['pfe'], e_vcb, f_vcb)
    file_handles['pfe'].close()

    ########################################################
    # Initialize Featureset
    ########################################################
    localFeatures = Features.LocalFeatures(pef, pfe)
    nonlocalFeatures = Features.NonlocalFeatures(pef, pfe)

    e_instances = []
    f_instances = []
    etree_instances = []
    ftree_instances = []
    a1_instances = []
    a2_instances = []
    gold_instances = []
    inverse_instances = []

    if FLAGS.train:
      f_dev_instances = []
      e_dev_instances = []
      etree_dev_instances = []
      ftree_dev_instances = []