能力说明
能力名称:内容语义指纹计算
功能简介
1.计算标题crc 2.计算urlcrc 3.计算长句crc 4.计算正文crc
配置参数
| 参数名称 | 参数类型 | 是否必填 | 默认值 | 参数说明 |
|---|---|---|---|---|
无
输入简介
无
输入数据样例
无
输出简介
1.计算标题crc,输出title_crc字段 2.计算urlcrc,输出url_crc字段 3.计算长句crc,输出content_multi_md5字段 4.计算正文crc,输出content_crc字段
输出数据样例
{"title_crc":"xxxx", "content_crc":"xxxx","content_multi_md5":"xxxx",
"url_crc":"xxxx"}
相关能力
需要前置模块预处理
参考指标
数据质量:100%
处理性能:1900条/s, 140条/s
微博数据1900条/s 资讯数据140条/s
附加说明
无
隐藏参数说明
无