fae，afile
2021-12-01 18:05:05 1 举报
登录查看完整内容
test
作者其他创作
大纲/内容
block2
schema chunk
column 1 pos
column 1 length
compress algorithm
........
column n pos
column n length
（visitorn，visnoden）
visitor_nevent_0 conversion_0event_1 conversion_1event_2 conversion_2.............event_m conversion_n
data chunk
column data 1
column data n
event 4
........part
........map2
visitor_0event_0 conversion_0event_1 conversion_1event_2 conversion_2............event_m conversion_n
。。。
（visitor2，visnode2）
block1
column 2（解压后）
visitor 1
visitor 2
visitor n
visitor_1event_0 conversion_0event_1 conversion_1event_2 conversion_2..............event_m conversion_n
Nas storage
partition1
master
磁盘存储part和block
（visitor1，visnode1）
event 1
........map mergerd
column n（解压后）
worker
partition2
内存中map合并
Afile
conv 3
visitor chunk
c_pos
visitor 1 pos
visitor 2 pos
visitor n pos
....
column1（解压后）
e_pos
member_list
member 1
member 2
member m
event 2
merger
c_link
e_node1
e_node 2
e_node n2
visitor_list
......
内存中每个block一个map
event 3
Afile列存文件结构
blockn
header
event 0
coordinator
conv 0
conv 1
conv 4
visitor id 1
c_num
e_num
visitor id n
........map1
importer
visitor 0
conv 2
0 条评论
回复 删除
下一页
