Example #1
0
def pipe_9420a757a49ddf11d8b98349abb5bcf4(context=None,
                                          _INPUT=None,
                                          conf=None,
                                          **kwargs):
    # todo: insert pipeline description here
    conf = conf or {}

    if context and context.describe_input:
        return []

    if context and context.describe_dependencies:
        return [u'pipefetchpage', u'pipeoutput', u'pipetruncate']

    forever = pipe_forever()

    sw_266 = pipe_fetchpage(
        context,
        forever,
        conf={
            'URL': {
                'type': 'url',
                'value': 'file://data/www.caltrain.com_Fares_farechart.html'
            },
            'to': {
                'type': 'text',
                'value': '</tr>'
            },
            'token': {
                'type': 'text',
                'value': '<td style="TEXT-ALIGN: center">'
            },
            'from': {
                'type': 'text',
                'value': 'One Way</span>'
            }
        })

    sw_287 = pipe_truncate(context,
                           sw_266,
                           conf={'count': {
                               'type': 'number',
                               'value': '100'
                           }})

    _OUTPUT = pipe_output(context, sw_287, conf=None)

    return _OUTPUT
 def pipe_sw_119(context=None, _INPUT=None, conf=None, **kwargs):
     # todo: insert submodule description here
     return pipe_fetchpage(context,
                           _INPUT,
                           conf={
                               'URL': {
                                   'type': 'url',
                                   'subkey': 'url'
                               },
                               'to': {
                                   'type': 'text',
                                   'value': '</tr>'
                               },
                               'token': {
                                   'type': 'text',
                                   'value':
                                   '<td style="TEXT-ALIGN: center">'
                               },
                               'from': {
                                   'type': 'text',
                                   'value': 'One Way</span>'
                               }
                           })
 def pipe_sw_119(context=None, _INPUT=None, conf=None, **kwargs):
     # todo: insert submodule description here
     return pipe_fetchpage(
         context, _INPUT, conf={'URL': {'type': 'url', 'subkey': 'url'}, 'to': {'type': 'text', 'value': '</tr>'}, 'token': {'type': 'text', 'value': '<td style="TEXT-ALIGN: center">'}, 'from': {'type': 'text', 'value': 'One Way</span>'}})