From the scripts/EGAP folder, with your virtualenv active, pip install -r requirements.txt


In [ ]:
from create_EGAP_json import create_file_tree_and_json
from files_to_import_structure import audit_files, main as convert_files

author_source = '/Users/bgeiger/Desktop/EGAP/20190821_author_emails.csv'
registry_source = '/Users/bgeiger/Desktop/EGAP/20191014_OSF_database.csv'
metadata_directory = '/Users/bgeiger/Desktop/EGAP/metadata/'
raw_files_directory = '/Users/bgeiger/Desktop/EGAP/raw_files/'
directories_to_process = [
    '20110302AA',
    '20110307AA',
    '20120117AA',
    '20120220AA',
    '20120727AA',
    '20120925AA',
    '20120926AA',
    '20121001AA',
    '20121002AA',
    '20121012AA',
    '20121026AA',
    '20121031AA',
    '20121101AA',
    '20121104AA',
    '20121106AA',
    '20121107AA',
    '20121123AA',
    '20121212AA',
    '20130122AA',
    '20130403AA',
    '20130406AA',
    '20130410AA',
    '20130426AA',
    '20130518AA',
    '20130607AA',
    '20130616AA',
    '20130704AA',
    '20130729AA',
    '20130731AA',
    '20130803AA',
    '20130813AA',
    '20130819AA',
    '20130913AA',
    '20130921AA',
    '20131012AA',
    '20131024AA',
    '20131101AA',
    '20131105AA',
    '20131110AA',
    '20131117AA',
    '20131118AA',
    '20131130AA',
    '20131203AA',
    '20131206AA',
    '20131210AA',
    '20131211AA',
    '20131216AA',
    '20131220AA',
    '20140110AA',
    '20140112AA',
    '20140113AA',
    '20140120AA',
    '20140124AA',
    '20140126AA',
    '20140131AA',
    '20140203AA',
    '20140203AB',
    '20140222AA',
    '20140222AB',
    '20140228AA',
    '20140303AA',
    '20140308AA',
    '20140316AA',
    '20140320AA',
    '20140417AA',
    '20140502AA',
    '20140503AA',
    '20140506AA',
    '20140509AA',
    '20140509AB',
    '20140512AA',
    '20140521AA',
    '20140523AA',
    '20140529AA',
    '20140610AA',
    '20140611AA',
    '20140611AB',
    '20140613AB',
    '20140627AA',
    '20140627AB',
    '20140627AC',
    '20140701AA',
    '20140701AB',
    '20140707AA',
    '20140708AA',
    '20140715AA',
    '20140722AA',
    '20140723AA',
    '20140723AB',
    '20140806AA',
    '20140812AA',
    '20140820AA',
    '20140912AA',
    '20140915AA',
    '20140918AA',
    '20140922AA',
    '20141002AA',
    '20141006AA',
    '20141023AA',
    '20141025AA',
    '20141027AA',
    '20141031AA',
    '20141031AB',
    '20141101AA',
    '20141103AA',
    '20141107AA',
    '20141117AA',
    '20141202AA',
    '20141208AA',
    '20141213AA',
    '20141223AA',
    '20141225AA',
    '20141227AA',
    '20141231AA',
    '20150110AA',
    '20150111AA',
    '20150118AA',
    '20150122AA',
    '20150122AB',
    '20150127AA',
    '20150131AA',
    '20150202AA',
    '20150204AA',
    '20150206AA',
    '20150211AA',
    '20150216AA',
    '20150304AA',
    '20150308AA',
    '20150309AA',
    '20150310AA',
    '20150311AA',
    '20150313AA',
    '20150320AA',
    '20150323AA',
    '20150324AA',
    '20150326AA',
    '20150330AA',
    '20150420AA',
    '20150423AA',
    '20150428AA',
    '20150429AA',
    '20150508AA',
    '20150513AA',
    '20150513AB',
    '20150513AC',
    '20150513AD',
    '20150513AE',
    '20150513AF',
    '20150513AG',
    '20150513AH',
    '20150513AI',
    '20150514AA',
    '20150517AA',
    '20150518AA',
    '20150520AA',
    '20150522AA',
    '20150526AA',
    '20150527AA',
    '20150602AA',
    '20150602AB',
    '20150603AA',
    '20150604AA',
    '20150605AA',
    '20150605AB',
    '20150616AA',
    '20150617AA',
    '20150619AA',
    '20150622AA',
    '20150623AA',
    '20150701AA',
    '20150702AA',
    '20150703AA',
    '20150707AA',
    '20150708AA',
    '20150709AA',
    '20150709AB',
    '20150710AA',
    '20150713AA',
    '20150716AA',
    '20150716AB',
    '20150717AA',
    '20150718AA',
    '20150720AA',
    '20150723AA',
    '20150724AA',
    '20150727AA',
    '20150731AA',
    '20150731AB',
    '20150803AA',
    '20150803AB',
    '20150812AA',
    '20150813AA',
    '20150813AB',
    '20150819AA',
    '20150819AB',
    '20150820AA',
    '20150824AA',
    '20150824AB',
    '20150825AA',
    '20150827AA',
    '20150903AA',
    '20150903AB',
    '20150914AA',
    '20150915AA',
    '20150917AA',
    '20150921AA',
    '20150922AA',
    '20150924AA',
    '20150925AA',
    '20150927AA',
    '20150928AA',
    '20150928AB',
    '20150929AA',
    '20150929AB',
    '20150930AA',
    '20150930AB',
    '20151003AA',
    '20151006AA',
    '20151006AB',
    '20151012AA',
    '20151013AA',
    '20151013AB',
    '20151014AA',
    '20151014AB',
    '20151016AA',
    '20151016AB',
    '20151016AC',
    '20151017AA',
    '20151019AA',
    '20151023AA',
    '20151027AA',
    '20151030AA',
    '20151102AA',
    '20151102AB',
    '20151102AC',
    '20151103AA',
    '20151107AA',
    '20151112AA',
    '20151112AB',
    '20151114AA',
    '20151116AA',
    '20151116AB',
    '20151118AA',
    '20151119AA',
    '20151119AB',
    '20151120AA',
    '20151120AB',
    '20151123AA',
    '20151125AA',
    '20151125AB',
    '20151128AA',
    '20151201AA',
    '20151201AB',
    '20151202AA',
    '20151204AA',
    '20151206AA',
    '20151207AA',
    '20151209AA',
    '20151218AA',
    '20160105AA',
    '20160106AA',
    '20160112AA',
    '20160112AB',
    '20160113AA',
    '20160113AB',
    '20160119AA',
    '20160121AA',
    '20160202AA',
    '20160208AA',
    '20160208AB',
    '20160208AC',
    '20160216AA',
    '20160217AA',
    '20160219AA',
    '20160222AA',
    '20160224AA',
    '20160224AB',
    '20160225AA',
    '20160308AA',
    '20160308AB',
    '20160309AA',
    '20160313AA',
    '20160315AA',
    '20160318AA',
    '20160321AA',
    '20160323AA',
    '20160324AA',
    '20160327AA',
    '20160330AA',
    '20160401AA',
    '20160404AA',
    '20160404AB',
    '20160405AA',
    '20160405AB',
    '20160406AA',
    '20160408AA',
    '20160409AA',
    '20160409AB',
    '20160410AA',
    '20160411AA',
    '20160411AB',
    '20160411AC',
    '20160411AD',
    '20160413AA',
    '20160414AA',
    '20160415AA',
    '20160416AA',
    '20160416AB',
    '20160421AA',
    '20160426AA',
    '20160427AA',
    '20160427AB',
    '20160429AA',
    '20160429AB',
    '20160507AA',
    '20160514AA',
    '20160515AA',
    '20160516AA',
    '20160517AA',
    '20160517AB',
    '20160517AC',
    '20160517AD',
    '20160517AE',
    '20160519AA',
    '20160520AA',
    '20160524AA',
    '20160531AA',
    '20160601AA',
    '20160601AB',
    '20160601AC',
    '20160601AD',
    '20160602AA',
    '20160603AA',
    '20160605AA',
    '20160607AA',
    '20160607AB',
    '20160609AA',
    '20160609AB',
    '20160609AC',
    '20160611AA',
    '20160612AA',
    '20160613AA',
    '20160613AB',
    '20160615AA',
    '20160615AB',
    '20160616AA',
    '20160617AA',
    '20160617AB',
    '20160618AA',
    '20160621AA',
    '20160621AB',
    '20160621AC',
    '20160621AD',
    '20160622AA',
    '20160622AB',
    '20160624AA',
    '20160624AB',
    '20160625AA',
    '20160628AA',
    '20160629AA',
    '20160630AA',
    '20160702AA',
    '20160708AA',
    '20160708AB',
    '20160712AA',
    '20160717AA',
    '20160719AA',
    '20160719AB',
    '20160721AA',
    '20160726AA',
    '20160726AB',
    '20160727AA',
    '20160729AA',
    '20160730AA',
    '20160801AA',
    '20160801AB',
    '20160803AA',
    '20160803AB',
    '20160809AA',
    '20160809AB',
    '20160812AA',
    '20160812AB',
    '20160813AA',
    '20160813AB',
    '20160813AC',
    '20160819AA',
    '20160819AB',
    '20160820AA',
    '20160822AA',
    '20160824AA',
    '20160825AA',
    '20160829AA',
    '20160831AA',
    '20160905AA',
    '20160907AA',
    '20160911AA',
    '20160912AB',
    '20160913AA',
    '20160913AB',
    '20160916AA',
    '20160916AB',
    '20160918AA',
    '20160919AA',
    '20160921AA',
    '20160921AB',
    '20160926AA',
    '20160926AB',
    '20160926AC',
    '20161001AA',
    '20161004AA',
    '20161006AA',
    '20161011AA',
    '20161016AA',
    '20161017AA',
    '20161019AA',
    '20161019AB',
    '20161020AA',
    '20161026AA',
    '20161028AA',
    '20161030AA',
    '20161101AA',
    '20161101AB',
    '20161103AA',
    '20161103AB',
    '20161104AA',
    '20161104AB',
    '20161109AA',
    '20161109AB',
    '20161109AC',
    '20161110AA',
    '20161110AB',
    '20161110AC',
    '20161110AD',
    '20161110AE',
    '20161112AA',
    '20161118AA',
    '20161121AA',
    '20161122AA',
    '20161122AB',
    '20161123AA',
    '20161125AA',
    '20161127AA',
    '20161128AA',
    '20161129AA',
    '20161204AA',
    '20161204AB',
    '20161205AA',
    '20161206AA',
    '20161207AA',
    '20161208AA',
    '20161212AA',
    '20161216AA',
    '20161216AB',
    '20161227AA',
    '20161227AB',
    '20170103AA',
    '20170109AA',
    '20170112AA',
    '20170115AA',
    '20170117AA',
    '20170118AA',
    '20170123AA',
    '20170124AA',
    '20170130AA',
    '20170131AA',
    '20170203AA',
    '20170203AB',
    '20170203AC',
    '20170203AD',
    '20170205AA',
    '20170207AA',
    '20170208AA',
    '20170209AA',
    '20170210AA',
    '20170212AA',
    '20170214AA',
    '20170214AB',
    '20170215AA',
    '20170216AA',
    '20170216AB',
    '20170220AA',
    '20170222AA',
    '20170223AA',
    '20170223AB',
    '20170223AC',
    '20170224AA',
    '20170225AA',
    '20170227AA',
    '20170227AB',
    '20170227AC',
    '20170301AA',
    '20170302AA',
    '20170307AA',
    '20170308AA',
    '20170308AB',
    '20170309AA',
    '20170310AA',
    '20170312AA',
    '20170317AA',
    '20170320AA',
    '20170320AB',
    '20170320AC',
    '20170321AA',
    '20170321AB',
    '20170322AA',
    '20170322AB',
    '20170323AA',
    '20170324AA',
    '20170325AA',
    '20170328AA',
    '20170329AA',
    '20170330AA',
    '20170403AA',
    '20170412AA',
    '20170412AB',
    '20170413AA',
    '20170413AB',
    '20170413AC',
    '20170414AA',
    '20170416AA',
    '20170417AA',
    '20170417AB',
    '20170420AA',
    '20170421AA',
    '20170422AA',
    '20170423AA',
    '20170423AB',
    '20170426AA',
    '20170427AA',
    '20170428AA',
    '20170501AA',
    '20170501AB',
    '20170501AC',
    '20170501AD',
    '20170503AA',
    '20170503AB',
    '20170503AC',
    '20170504AA',
    '20170504AB',
    '20170505AA',
    '20170505AB',
    '20170505AC',
    '20170506AA',
    '20170507AA',
    '20170508AA',
    '20170508AB',
    '20170509AA',
    '20170509AB',
    '20170510AA',
    '20170511AA',
    '20170515AA',
    '20170515AB',
    '20170516AA',
    '20170517AA',
    '20170519AA',
    '20170520AA',
    '20170522AA',
    '20170523AA',
    '20170524AA',
    '20170525AA',
    '20170525AB',
    '20170527AA',
    '20170531AA',
    '20170602AA',
    '20170603AA',
    '20170606AA',
    '20170608AA',
    '20170609AA',
    '20170609AB',
    '20170609AC',
    '20170611AA',
    '20170611AB',
    '20170612AA',
    '20170613AA',
    '20170614AA',
    '20170615AA',
    '20170615AB',
    '20170616AA',
    '20170617AA',
    '20170618AA',
    '20170619AA',
    '20170626AA',
    '20170626AB',
    '20170629AA',
    '20170705AA',
    '20170706AA',
    '20170706AB',
    '20170706AC',
    '20170711AA',
    '20170712AA',
    '20170714AA',
    '20170716AA',
    '20170716AB',
    '20170717AA',
    '20170720AA',
    '20170720AB',
    '20170720AC',
    '20170721AA',
    '20170721AB',
    '20170724AA',
    '20170725AA',
    '20170725AB',
    '20170727AA',
    '20170728AA',
    '20170728AB',
    '20170729AA',
    '20170731AA',
    '20170803AA',
    '20170804AA',
    '20170805AA',
    '20170807AA',
    '20170808AA',
    '20170809AA',
    '20170810AA',
    '20170811AA',
    '20170811AB',
    '20170814AA',
    '20170815AA',
    '20170816AA',
    '20170819AA',
    '20170821AA',
    '20170821AB',
    '20170822AA',
    '20170823AA',
    '20170828AA',
    '20170829AA',
    '20170831AA',
    '20170901AA',
    '20170905AA',
    '20170906AA',
    '20170907AA',
    '20170908AA',
    '20170908AB',
    '20170908AC',
    '20170910AA',
    '20170911AA',
    '20170913AA',
    '20170913AB',
    '20170913AC',
    '20170914AA',
    '20170914AB',
    '20170915AA',
    '20170915AB',
    '20170918AA',
    '20170919AA',
    '20170920AA',
    '20170920AB',
    '20170920AC',
    '20170921AA',
    '20170922AA',
    '20170922AB',
    '20170922AC',
    '20170925AA',
    '20170926AA',
    '20170926AB',
    '20170927AA',
    '20170927AB',
    '20170928AA',
    '20170929AA',
    '20170930AA',
    '20171001AA',
    '20171001AB',
    '20171002AA',
    '20171003AA',
    '20171003AB',
    '20171004AA',
    '20171009AA',
    '20171010AA',
    '20171010AB',
    '20171012AA',
    '20171013AA',
    '20171015AA',
    '20171016AA',
    '20171017AA',
    '20171018AA',
    '20171019AA',
    '20171020AA',
    '20171022AA',
    '20171023AA',
    '20171024AA',
    '20171024AB',
    '20171024AC',
    '20171025AA',
    '20171027AA',
    '20171101AA',
    '20171103AA',
    '20171104AA',
    '20171104AB',
    '20171105AA',
    '20171106AA',
    '20171106AB',
    '20171106AC',
    '20171107AA',
    '20171109AA',
    '20171109AB',
    '20171113AA',
    '20171113AB',
    '20171113AC',
    '20171114AA',
    '20171115AA',
    '20171117AA',
    '20171117AB',
    '20171117AC',
    '20171119AA',
    '20171120AA',
    '20171120AB',
    '20171121AA',
    '20171121AB',
    '20171122AA',
    '20171122AB',
    '20171122AC',
    '20171124AA',
    '20171127AA',
    '20171127AB',
    '20171128AA',
    '20171129AA',
    '20171205AA',
    '20171205AB',
    '20171206AA',
    '20171208AA',
    '20171210AA',
    '20171210AB',
    '20171211AA',
    '20171211AB',
    '20171211AC',
    '20171213AA',
    '20171218AA',
    '20171218AB',
    '20171218AC',
    '20171221AA',
    '20171222AA',
    '20171223AA',
    '20171228AA',
    '20171229AA',
    '20171230AA',
    '20180105AA',
    '20180105AB',
    '20180105AC',
    '20180105AD',
    '20180108AA',
    '20180108AB',
    '20180109AA',
    '20180109AB',
    '20180110AA',
    '20180110AB',
    '20180113AA',
    '20180119AA',
    '20180120AA',
    '20180121AA',
    '20180123AA',
    '20180124AA',
    '20180125AA',
    '20180126AA',
    '20180126AB',
    '20180127AA',
    '20180128AA',
    '20180130AA',
    '20180201AA',
    '20180201AB',
    '20180201AC',
    '20180202AA',
    '20180202AB',
    '20180202AC',
    '20180204AA',
    '20180204AB',
    '20180205AA',
    '20180205AB',
    '20180205AC',
    '20180206AA',
    '20180208AA',
    '20180208AB',
    '20180209AA',
    '20180211AA',
    '20180213AA',
    '20180213AB',
    '20180214AA',
    '20180215AA',
    '20180215AB',
    '20180215AC',
    '20180219AA',
    '20180219AB',
    '20180220AA',
    '20180221AA',
    '20180221AB',
    '20180222AA',
    '20180222AB',
    '20180227AA',
    '20180228AA',
    '20180228AB',
    '20180302AA',
    '20180303AA',
    '20180304AA',
    '20180304AB',
    '20180304AC',
    '20180304AD',
    '20180305AA',
    '20180306AA',
    '20180308AA',
    '20180310AA',
    '20180313AA',
    '20180315AA',
    '20180315AB',
    '20180315AC',
    '20180316AA',
    '20180316AB',
    '20180318AA',
    '20180319AA',
    '20180319AB',
    '20180319AC',
    '20180320AA',
    '20180321AA',
    '20180323AA',
    '20180323AB',
    '20180324AA',
    '20180325AA',
    '20180327AA',
    '20180328AA',
    '20180329AA',
    '20180331AA',
    '20180401AA',
    '20180402AA',
    '20180402AB',
    '20180403AA',
    '20180404AA',
    '20180409AA',
    '20180409AB',
    '20180409AC',
    '20180413AA',
    '20180413AB',
    '20180416AA',
    '20180417AA',
    '20180418AA',
    '20180418AB',
    '20180423AA',
    '20180424AA',
    '20180425AA',
    '20180425AB',
    '20180425AC',
    '20180425AD',
    '20180426AA',
    '20180426AB',
    '20180426AC',
    '20180427AA',
    '20180430AA',
    '20180430AB',
    '20180430AC',
    '20180502AA',
    '20180503AA',
    '20180503AB',
    '20180504AA',
    '20180507AA',
    '20180508AA',
    '20180509AA',
    '20180509AB',
    '20180514AA',
    '20180515AA',
    '20180515AB',
    '20180516AA',
    '20180516AB',
    '20180518AA',
    '20180521AA',
    '20180521AB',
    '20180523AA',
    '20180528AA',
    '20180529AA',
    '20180529AB',
    '20180529AC',
    '20180530AA',
    '20180601AA',
    '20180602AA',
    '20180605AA',
    '20180605AB',
    '20180605AC',
    '20180605AD',
    '20180607AA',
    '20180608AA',
    '20180608AB',
    '20180610AA',
    '20180610AB',
    '20180611AA',
    '20180611AB',
    '20180612AA',
    '20180613AA',
    '20180614AA',
    '20180614AB',
    '20180615AA',
    '20180616AA',
    '20180619AA',
    '20180619AB',
    '20180620AA',
    '20180625AA',
    '20180626AA',
    '20180628AA',
    '20180628AB',
    '20180701AA',
    '20180703AA',
    '20180703AB',
    '20180703AC',
    '20180707AA',
    '20180709AA',
    '20180709AB',
    '20180710AA',
    '20180710AB',
    '20180710AC',
    '20180711AA',
    '20180711AB',
    '20180712AA',
    '20180713AA',
    '20180716AA',
    '20180719AA',
    '20180720AA',
    '20180722AA',
    '20180723AA',
    '20180723AB',
    '20180724AA',
    '20180724AB',
    '20180725AA',
    '20180725AB',
    '20180725AC',
    '20180730AA',
    '20180731AA',
    '20180801AA',
    '20180801AB',
    '20180802AA',
    '20180802AB',
    '20180803AA',
    '20180804AA',
    '20180807AA',
    '20180807AB',
    '20180808AA',
    '20180809AA',
    '20180809AB',
    '20180809AC',
    '20180810AA',
    '20180811AA',
    '20180812AA',
    '20180814AA',
    '20180814AB',
    '20180815AA',
    '20180816AA',
    '20180816AB',
    '20180817AA',
    '20180819AA',
    '20180819AB',
    '20180821AA',
    '20180821AB',
    '20180822AA',
    '20180826AA',
    '20180827AA',
    '20180827AB',
    '20180829AA',
    '20180831AA',
    '20180903AA',
    '20180904AA',
    '20180904AB',
    '20180905AA',
    '20180906AA',
    '20180910AA',
    '20180910AB',
    '20180912AA',
    '20180914AA',
    '20180918AA',
    '20180918AB',
    '20180919AA',
    '20180920AA',
    '20180920AB',
    '20180925AA',
    '20180925AB',
    '20180927AA',
    '20180927AB',
    '20181001AA',
    '20181003AA',
    '20181005AA',
    '20181006AA',
    '20181010AA',
    '20181010AB',
    '20181012AA',
    '20181013AA',
    '20181015AA',
    '20181016AA',
    '20181017AA',
    '20181017AB',
    '20181018AA',
    '20181019AA',
    '20181022AA',
    '20181023AA',
    '20181023AB',
    '20181024AA',
    '20181024AB',
    '20181024AC',
    '20181025AA',
    '20181026AA',
    '20181029AA',
    '20181030AA',
    '20181030AB',
    '20181031AA',
    '20181101AA',
    '20181101AB',
    '20181101AC',
    '20181101AD',
    '20181102AA',
    '20181102AB',
    '20181102AC',
    '20181102AD',
    '20181105AA',
    '20181105AB',
    '20181105AC',
    '20181105AD',
    '20181106AA',
    '20181106AB',
    '20181106AC',
    '20181106AD',
    '20181106AE',
    '20181106AF',
    '20181107AA',
    '20181108AA',
    '20181108AB',
    '20181108AC',
    '20181110AA',
    '20181111AA',
    '20181112AA',
    '20181112AB',
    '20181112AC',
    '20181112AD',
    '20181113AA',
    '20181114AA',
    '20181115AA',
    '20181115AB',
    '20181115AC',
    '20181115AD',
    '20181120AA',
    '20181120AB',
    '20181120AC',
    '20181123AA',
    '20181125AA',
    '20181126AA',
    '20181126AB',
    '20181127AA',
    '20181127AB',
    '20181127AC',
    '20181128AA',
    '20181129AA',
    '20181129AB',
    '20181130AA',
    '20181130AB',
    '20181201AA',
    '20181201AB',
    '20181204AA',
    '20181204AB',
    '20181204AC',
    '20181205AA',
    '20181205AB',
    '20181206AA',
    '20181206AB',
    '20181206AC',
    '20181206AD',
    '20181206AE',
    '20181206AF',
    '20181206AG',
    '20181207AA',
    '20181208AA',
    '20181210AA',
    '20181210AB',
    '20181211AA',
    '20181211AB',
    '20181211AC',
    '20181212AA',
    '20181214AA',
    '20181216AA',
    '20181216AB',
    '20181219AA',
    '20181219AB',
    '20181221AA',
    '20181221AB',
    '20181221AC',
    '20181222AA',
    '20181228AA',
    '20181230AA',
    '20190103AA',
    '20190108AA',
    '20190109AA',
    '20190110AA',
    '20190110AB',
    '20190110AC',
    '20190111AA',
    '20190113AA',
    '20190113AB',
    '20190114AA',
    '20190115AA',
    '20190116AA',
    '20190116AB',
    '20190116AC',
    '20190119AA',
    '20190121AA',
    '20190122AA',
    '20190125AA',
    '20190128AA',
    '20190128AB',
    '20190128AC',
    '20190129AA',
    '20190129AB',
    '20190130AA',
    '20190131AA',
    '20190131AB',
    '20190131AC',
    '20190201AA',
    '20190201AB',
    '20190201AC',
    '20190202AA',
    '20190204AA',
    '20190205AA',
    '20190205AB',
    '20190205AC',
    '20190206AA',
    '20190206AB',
    '20190206AC',
    '20190208AA',
    '20190212AA',
    '20190212AB',
    '20190213AA',
    '20190213AB',
    '20190213AC',
    '20190213AD',
    '20190213AE',
    '20190215AA',
    '20190215AB',
    '20190215AC',
    '20190215AD',
    '20190215AE',
    '20190215AF',
    '20190219AA',
    '20190220AA',
    '20190220AB',
    '20190220AC',
    '20190221AA',
    '20190223AA',
    '20190223AB',
    '20190223AC',
    '20190225AA',
    '20190227AA',
    '20190227AB',
    '20190301AA',
    '20190301AB',
    '20190301AC',
    '20190301AD',
    '20190304AA',
    '20190304AB',
    '20190304AC',
    '20190304AD',
    '20190305AA',
    '20190306AA',
    '20190306AB',
    '20190307AA',
    '20190309AA',
    '20190310AA',
    '20190311AA',
    '20190311AB',
    '20190311AC',
    '20190312AA',
    '20190313AA',
    '20190313AB',
    '20190313AC',
    '20190313AD',
    '20190313AE',
    '20190314AA',
    '20190314AB',
    '20190314AC',
    '20190314AD',
    '20190314AE',
    '20190314AF',
    '20190314AG',
    '20190314AH',
    '20190314AI',
    '20190314AJ',
    '20190314AK',
    '20190314AL',
    '20190315AA',
    '20190315AB',
    '20190315AC',
    '20190315AD',
    '20190320AA',
    '20190320AB',
    '20190320AC',
    '20190320AD',
    '20190325AA',
    '20190326AA',
    '20190326AB',
    '20190327AA',
    '20190327AB',
    '20190327AC',
    '20190328AA',
    '20190329AA',
    '20190329AB',
    '20190401AA',
    '20190401AB',
    '20190402AA',
    '20190404AA',
    '20190405AA',
    '20190406AA',
    '20190410AA',
    '20190410AB',
    '20190410AC',
    '20190411AA',
    '20190411AB',
    '20190411AC',
    '20190412AA',
    '20190416AA',
    '20190417AA',
    '20190417AB',
    '20190418AA',
    '20190420AA',
    '20190422AA',
    '20190423AA',
    '20190424AA',
    '20190424AB',
    '20190426AA',
    '20190427AA',
    '20190427AB',
    '20190429AA',
    '20190430AA',
    '20190430AB',
    '20190430AC',
    '20190503AA',
    '20190503AB',
    '20190506AA',
    '20190507AA',
    '20190507AB',
    '20190512AA',
    '20190513AA',
    '20190513AB',
    '20190513AC',
    '20190514AA',
    '20190515AA',
    '20190515AB',
    '20190515AC',
    '20190515AD',
    '20190515AE',
    '20190516AA',
    '20190517AA',
    '20190520AA',
    '20190522AA',
    '20190522AB',
    '20190522AC',
    '20190522AD',
    '20190522AE',
    '20190522AF',
    '20190524AA',
    '20190524AB',
    '20190526AA',
    '20190526AB',
    '20190527AA',
    '20190527AB',
    '20190528AA',
    '20190528AB',
    '20190528AC',
    '20190529AA',
    '20190529AB',
    '20190529AC',
    '20190530AA',
    '20190530AB',
    '20190530AC',
    '20190531AA',
    '20190603AA',
    '20190604AA',
    '20190604AB',
    '20190604AC',
    '20190604AD',
    '20190604AE',
    '20190605AA',
    '20190605AB',
    '20190605AC',
    '20190606AA',
    '20190606AB',
    '20190606AC',
    '20190606AD',
    '20190607AA',
    '20190608AA',
    '20190609AA',
    '20190611AA',
    '20190612AA',
    '20190613AA',
    '20190613AB',
    '20190614AA',
    '20190615AA',
    '20190616AA',
    '20190616AB',
    '20190616AC',
    '20190617AA',
    '20190618AA',
    '20190620AA',
    '20190620AB',
    '20190620AC',
    '20190620AD',
    '20190621AA',
    '20190621AB',
    '20190624AA',
    '20190625AA',
    '20190625AB',
    '20190625AC',
    '20190625AD',
    '20190625AE',
    '20190626AA',
    '20190701AA',
    '20190703AA',
    '20190707AA',
    '20190707AB',
    '20190708AA',
    '20190708AB',
    '20190709AA',
    '20190709AB',
    '20190710AA',
    '20190711AA',
    '20190711AB',
    '20190711AC',
    '20190712AA',
    '20190713AA',
    '20190714AA',
    '20190716AA',
    '20190716AB',
    '20190717AA',
    '20190717AB',
    '20190717AC',
    '20190718AA',
    '20190718AB',
    '20190718AC',
    '20190719AA',
    '20190719AB',
    '20190722AA',
    '20190722AB',
    '20190722AC',
    '20190723AA',
    '20190724AA',
    '20190724AB',
    '20190724AC',
    '20190724AD',
    '20190725AA',
    '20190726AA',
    '20190729AA',
    '20190729AB',
    '20190730AA',
    '20190731AA',
    '20190731AB',
    '20190731AC',
    '20190731AD',
    '20190731AE',
    '20190802AA',
    '20190804AA',
    '20190806AA',
    '20190807AA',
    '20190807AB',
    '20190808AA',
    '20190808AB',
    '20190810AA',
    '20190810AB',
    '20190812AA',
    '20190812AB',
    '20190813AA',
    '20190813AB',
    '20190814AA',
    '20190814AB',
    '20190814AC',
    '20190815AA',
    '20190816AA',
    '20190819AA',
    '20190819AB',
    '20190821AA',
    '20190822AA',
    '20190822AB',
    '20190822AC',
    '20190823AA',
    '20190825AA',
    '20190826AA',
    '20190826AB',
    '20190827AA',
    '20190828AA',
    '20190828AB',
    '20190828AC',
    '20190829AA',
    '20190901AA',
    '20190901AB',
    '20190901AC',
    '20190903AA',
    '20190903AB',
    '20190904AA',
    '20190905AA',
    '20190905AB',
    '20190906AA',
    '20190906AB',
    '20190906AC',
    '20190909AA',
    '20190909AB',
    '20190909AC',
    '20190911AA',
    '20190912AA',
    '20190912AB',
    '20190912AC',
    '20190912AD',
    '20190912AE',
    '20190912AF',
    '20190913AA',
    '20190914AA',
    '20190914AB',
    '20190915AA',
    '20190916AA',
    '20190916AB',
    '20190916AC',
    '20190917AA',
    '20190917AB',
    '20190917AC',
    '20190917AD',
    '20190919AA',
    '20190920AA',
    '20190920AB',
    '20190922AA',
    '20190922AB',
    '20190923AA',
    '20190924AA',
    '20190924AB',
    '20190924AC',
    '20190924AD',
    '20190925AA',
    '20190925AB',
    '20190925AC',
    '20190926AA',
    '20190926AB',
    '20190926AC',
    '20190927AA',
    '20190930AA',
    '20190930AB',
    '20190930AC',
    '20191001AA',
    '20191003AA',
    '20191003AB',
    '20191003AC',
    '20191004AA',
    '20191007AA',
    '20191008AA',
    '20191008AB',
    '20191009AA',
    '20191009AB',
    '20191010AA',
    '20191011AA',
    '20191012AA',
    '20191013AA',
    '20191014AA',
    '20191017AA',
    '20191017AB',
    '20191017AC',
    '20191020AA',
    '20191021AA',
    '20191021AB',
    '20191022AA',
    '20191023AA',
    '20191023AB',
    '20191023AC',
    '20191023AD',
    '20191024AA',
    '20191024AB',
]

In [ ]:
create_file_tree_and_json(author_source, registry_source, metadata_directory)

In [ ]:
audit_files(raw_files_directory)

In [ ]:
convert_files(raw_files_directory, metadata_directory, directories_to_process)
print('Done converting files.')

In [ ]: