コード例 #1
0
ファイル: _hdfs_test.py プロジェクト: DavW/luigi
 def test_readback(self):
     pipe = hdfs.HdfsAtomicWriteDirPipe(self.path)
     self.assertFalse(hdfs.exists(self.path))
     pipe.write("foo\nbar")
     pipe.close()
     self.assertTrue(hdfs.exists(self.path))
     dirlist = tuple(hdfs.listdir(self.path))
     datapath = '%s/data' % self.path
     self.assertEquals(dirlist, (datapath,))
     pipe = hdfs.HdfsReadPipe(datapath)
     self.assertEqual(pipe.read(), "foo\nbar")
コード例 #2
0
ファイル: _hdfs_test.py プロジェクト: dbunskoek/luigi
 def test_readback(self):
     pipe = hdfs.HdfsAtomicWriteDirPipe(self.path)
     self.assertFalse(hdfs.exists(self.path))
     pipe.write("foo\nbar")
     pipe.close()
     self.assertTrue(hdfs.exists(self.path))
     dirlist = tuple(hdfs.listdir(self.path))
     datapath = '%s/data' % self.path
     self.assertEquals(dirlist, (datapath,))
     pipe = hdfs.HdfsReadPipe(datapath)
     self.assertEqual(pipe.read(), "foo\nbar")
コード例 #3
0
ファイル: hdfs_test.py プロジェクト: xzllc2010/luigi
 def test_readback(self):
     pipe = hdfs.HdfsAtomicWriteDirPipe(self.path)
     self.assertFalse(self.fs.exists(self.path))
     pipe.write("foo\nbar")
     pipe.close()
     self.assertTrue(hdfs.exists(self.path))
     dirlist = hdfs.listdir(self.path)
     datapath = '%s/data' % self.path
     returnlist = [d for d in dirlist]
     self.assertTrue(returnlist[0].endswith(datapath))
     pipe = hdfs.HdfsReadPipe(datapath)
     self.assertEqual(pipe.read(), "foo\nbar")