特征
2016-01-15 10:43:14 6 举报特征，通常指一个事物或个体所具有的独特性质或显著标志。它可以是物理的，如颜色、形状、大小；也可以是抽象的，如性格、能力、态度等。特征是区分和识别事物的重要依据，也是构成事物个性和多样性的关键因素。例如，狮子的特征包括强壮的体格、锋利的爪子和威猛的吼声；而人类的特征则包括直立行走、高度发达的大脑和使用工具的能力。通过研究和理解特征，我们可以更深入地认识世界，更好地适应和改变环境。
作者其他创作
大纲/内容
hashmap块2
hashmap块1
特征共享内存
深圳
HurricaneServer(key-value累计服务)
20篇内容
分块1[版本号]
特征更新线程
动态特征：n块
全量特征缓存
组合特征
本地缓存
逻辑服务器N
静态特征
文件同步
...
全量key
文件服务器
扩容
更新
召回服务
动态特征
主控1
DCache
全量缓存刷新key来源
特征使用情况
版本控制协议：1. 时间戳版本控制，注意内存空间（容量合并/时间淘汰）；2. 主控多节点数据一致性问题；
主写
推荐
更新队列
全量缓存（包含：静态、动态、组合、上下文特征）
重启
3000篇内容
粗排服务
索引服务
写入
特征：静态、动态、组合、上下文特征
全量阶段
docId: 7758258type:0feature: [序列化字符串]
LRU做全量key限制
LRU内存缓存
有特征更新的内容key
特征：静态、动态、组合特征
CarrierServer(dcache按字段更新写入服务）
精排服务
1百万篇内容
上海
多线程
100篇内容
目前主题id
300篇内容
删除
全量特征刷新key
推荐层根据灰度桶使用新的主题id做多样性空、模型排序以及召回
多线程多队列实时收集访问内容key
逻辑服务器2
分块2[版本号]
特征：静态、动态特征
新增
CarrierSerialServer(dcache序列化读覆盖写服务）
数据一致性：1. 全量key经过多次版本控制后，缓存的全量key是否和索引一致；
变更
天津
CEPH全量key
场景
数据源
注意反序列化支持字段扩展
逻辑服务器3
DB
leveldb
缓存方式
持久化
推荐层切换使用新的主题id做多样性空、模型排序以及召回
日志服务
hashmap块n
现特征实时积累流程：
版本控制更新的key
为了不影响原先CarrierServer特征写入更新队列，重开一个服务做序列化特征写入；【后续图文、视频变更也将集成在该服务】
全量缓存（包含：静态、动态、组合特征）
定时dump
主控2
主控3
美食
更新耗时评估：1. 静态/动态/组合分别获取10w个key耗时；2. DCache流量评估--是否引入二级缓存；
业务
收集内容key集合
1. 读出序列化内容；2. 更新内容然后覆盖写入dcache；3. 失败重试；
docId: 7758258type:0expose:100click:4expose_1:300click_1:6
汽车
逻辑服务器1
主机（深圳）
灰度阶段
分块n[版本号]
CarrierVideoSerialServer(dcache序列化读覆盖写服务）
军事
获取特征接口
实时累积服务
0 条评论
下一页
