Python 保存批次'；pyspark中的数据

我需要从批次中积累数据一段时间，以便后期处理。我使用的是Spark 1.6.3。
我需要以

（标记，[[time，value]，…]

）的形式累积它们。 到目前为止，我已经尝试了

updateStateByKey

：

time = [0]
def updateFunc(new_values, last_sum,time):
    time[0] += 5
    if time == 10:
        time = 0
        return None
    return (last_sum or []) + new_values

data = lines.flatMap(lambda line: line.split(" "))\
                  .map(lambda word: (word, ['t','t1'])) \
                  .updateStateByKey(lambda x,y :updateFunc(x,y,time))
data.pprint()

正在添加数据。但是，尝试在10秒后刷新数据无效。（我做错了）

我还尝试使用

窗口
：

data= lines.flatMap(lambda lime: line.split(' ')\
    .map(lambda tag: (tag: ['time', 'value']))\
    .window(10, 2)\
    .reduceByKey(lambda x,y : y + x)`


但是，这会产生一个一维的长列表。这是没有用的。
有线索吗？多谢各位

items = lines.flatMap(lambda x: list(x)).map(lambda x: (x, [('time', 'value')]))
counts = items.reduceByKeyAndWindow(lambda x, y: x + y, invFunc=None, windowDuration=3, slideDuration=2)

试试这个

试试这个