能力说明
能力名称:元搜索
功能简介
根据搜索词周期性采集新闻(百度新闻、搜狗新闻、360新闻);视频(腾讯视频、优酷视频、搜狐视频、爱奇艺视频);问答(知乎、百度知道);论坛(天涯、雪球);贴吧(百度、豆瓣);博客(新浪)的数据
配置参数
参数名称 | 参数类型 | 是否必填 | 默认值 | 参数说明 |
---|---|---|---|---|
请输入搜索词 | 文本 | 否 | 无 | 格式为一行一个,多个搜索词,请换行(换行操作:shift+回车),建议部署上限在10000以内;当能力接收上层数据流时可不填 |
请选择搜索网站 | 多选框 | 是 | 无 | 可以全选,也可以自由组合选择 |
请输入任务周期(单位:分钟) | 数字 | 是 | 1440 | 下拉列表可选择 |
输入简介
输入需要搜索的搜索词,多个以换行分隔(换行操作:shift+回车),建议部署上限在10000以内
输入数据样例
输入搜索词示例:
北京八分钟
人工智能
输出简介
输出符合搜索词条件的数据,以json格式输出。
注意:
1,360新闻,标题中和正文中有搜索词的数据
2,搜狗新闻,标题和中文中有搜索词的数据
3,百度新闻,包括新闻类中全文和标题中有搜索词的数据
4,豆瓣网,天涯论坛,如搜索词没有搜索结果,会有杂质
输出数据样例
以新浪博客为例: 部分输出字段简介:
1.author:作者
2.url:博客的链接
3.content:文章内容
4.release_date:发布时间
5.title:文章标题
输出详细字段信息举例如下:
{
"abstract": "我家屋子,坐南朝北,四周环山,每一日晨间第一缕阳光,落在我家的墙,穿过窗子,落在房里。只是阳光总是无处不在,也不知道从哪个地方,就悄悄钻进了水底,隔着冰轻轻地晃动,好看。",
"author": "冯家顶的风格",
"class17": "",
"class23": "",
"content": " 冯家顶的冬天,寒冰三尺,灿烂千阳。
我家屋子,坐南朝北,四周环山,每一日晨间第一缕阳光,落在我家的墙,穿过窗子,落在房里。
还没醒的时候,就睡在如此的阳光边上,那种温暖,大概梦里都是暖的。
于此同时,阳光也落在了门前的鱼塘,只是鱼塘轻轻地结了一层冰,阳光大概也没料到有冰的存在,一头撞在冰上,碎了一个冰面的阳光,打着滚,散落到处。
只是阳光总是无处不在,也不知道从哪个地方,就悄悄钻进了水底,隔着冰轻轻地晃动,好看。
果子妈蹲在水边,有手指戳戳,这是冰嘛。那一场景十分温暖,拍下来的时候,冰都消融的见不着了,多美。
阳光落在墙上,也落在门前的雪里,蹲在雪地里,望着我家的房子,雪光,阳光,似乎像隐了一层淡淡的雾,又觉得是一种散,月光散,阳光散,散落人间,散落门前。
散落在屋顶的时候,还未融化的雪,泛着点点的光,露出的瓦片一道道,一行行,像最美的文字。
直到傍晚,夕阳的余晖落在门前的雪上,一下子让雪变得轻柔,洁白,美好,任谁都不愿意落脚。
阳光全无时,山里还未黑,一下子整个的山庄突然安静下来,变得宁静安详,所有的人们得活在这样的时空里温暖的房子里。
冯家顶的夜,在寒冬里,静静地,家里暖暖的。",
"content_crc": "2362279561466737006",
"content_media_name": "新浪博客",
"download_date": "2018-3-9 9:49:11",
"format_content": "<p taggedby="hylanda"> 冯家顶的冬天,寒冰三尺,灿烂千阳。</p taggedby="hylanda">
<p taggedby="hylanda"> 我家屋子,坐南朝北,四周环山,每一日晨间第一缕阳光,落在我家的墙,穿过窗子,落在房里。</p taggedby="hylanda">
<p taggedby="hylanda"> 还没醒的时候,就睡在如此的阳光边上,那种温暖,大概梦里都是暖的。</p taggedby="hylanda">
<p taggedby="hylanda"> 于此同时,阳光也落在了门前的鱼塘,只是鱼塘轻轻地结了一层冰,阳光大概也没料到有冰的存在,一头撞在冰上,碎了一个冰面的阳光,打着滚,散落到处。</p taggedby="hylanda">
<p taggedby="hylanda"> 只是阳光总是无处不在,也不知道从哪个地方,就悄悄钻进了水底,隔着冰轻轻地晃动,好看。</p taggedby="hylanda">
<p taggedby="hylanda"> 果子妈蹲在水边,有手指戳戳,这是冰嘛。那一场景十分温暖,拍下来的时候,冰都消融的见不着了,多美。</p taggedby="hylanda">
<p taggedby="hylanda"> 阳光落在墙上,也落在门前的雪里,蹲在雪地里,望着我家的房子,雪光,阳光,似乎像隐了一层淡淡的雾,又觉得是一种散,月光散,阳光散,散落人间,散落门前。</p taggedby="hylanda">
<p taggedby="hylanda"> 散落在屋顶的时候,还未融化的雪,泛着点点的光,露出的瓦片一道道,一行行,像最美的文字。</p taggedby="hylanda">
<p taggedby="hylanda"> 直到傍晚,夕阳的余晖落在门前的雪上,一下子让雪变得轻柔,洁白,美好,任谁都不愿意落脚。</p taggedby="hylanda">
<p taggedby="hylanda"> 阳光全无时,山里还未黑,一下子整个的山庄突然安静下来,变得宁静安详,所有的人们得活在这样的时空里温暖的房子里。</p taggedby="hylanda">
<p taggedby="hylanda"> 冯家顶的夜,在寒冬里,静静地,家里暖暖的。</p taggedby="hylanda">",
"from_flag": "h2x_metasearch_0",
"keywords": "千阳 冯家 阳光 我家 环山 月光 夕阳 多美 鱼塘 余晖",
"lastmodify_date": "2018-3-7 21:21:40",
"media_name": "新浪博客",
"multi_page": "{"page_cnt":"1","page_info":[{"status":"0","url":"http://blog.sina.com.cn/u/52516e410102xiew"}]}",
"navigation": "冯家顶。寒冰三尺,灿烂千阳>冯家顶的风格>新浪博客",
"original_media_name": "",
"original_media_url": "",
"other_content": "",
"other_page": "http://blog.sina.com.cn/u/52516e410102xiew",
"page_title": "冯家顶。寒冰三尺,灿烂千阳_冯家顶的风格_新浪博客",
"picture_description": "",
"picture_list": "",
"refer_source_type": "2",
"refer_url": "http://search.sina.com.cn/?c=blog&q=%B2%D3%C0%C3%C7%A7%D1%F4&range=article&by=&sort=time&col=&source=&from=&country=&size=&time=&a=&isown=false",
"rel_type": "m",
"release_date": "2018-02-04 22:09:22",
"sensitive_words": "",
"source_type": "268435460",
"tags": "阳光/NT/0.168823 果子/NT/0.090596 窗子/NT/0.084728",
"title": "冯家顶。寒冰三尺,灿烂千阳",
"title_crc": "15976037444283030176",
"url": "http://blog.sina.com.cn/u/52516e410102xiew"
}
相关能力
无
参考指标
数据质量:准确率:99.9%;及时率:7200条/小时之内为100%(任务量越大,及时率越低)
处理性能:7200条/小时
CPU:4 内存:4G
附加说明
无
隐藏参数说明
无