能力说明

能力名称:元搜索

功能简介

根据搜索词周期性采集新闻(百度新闻、搜狗新闻、360新闻);视频(腾讯视频、优酷视频、搜狐视频、爱奇艺视频);问答(知乎、百度知道);论坛(天涯、雪球);贴吧(百度、豆瓣);博客(新浪)的数据

配置参数

参数名称 参数类型 是否必填 默认值 参数说明
请输入搜索词 文本 格式为一行一个,多个搜索词,请换行(换行操作:shift+回车),建议部署上限在10000以内;当能力接收上层数据流时可不填
请选择搜索网站 多选框 可以全选,也可以自由组合选择
请输入任务周期(单位:分钟) 数字 1440 下拉列表可选择

输入简介

输入需要搜索的搜索词,多个以换行分隔(换行操作:shift+回车),建议部署上限在10000以内

输入数据样例

输入搜索词示例:

北京八分钟
人工智能

输出简介

输出符合搜索词条件的数据,以json格式输出。

注意:

1,360新闻,标题中和正文中有搜索词的数据

2,搜狗新闻,标题和中文中有搜索词的数据

3,百度新闻,包括新闻类中全文和标题中有搜索词的数据

4,豆瓣网,天涯论坛,如搜索词没有搜索结果,会有杂质

输出数据样例

以新浪博客为例: 部分输出字段简介:

1.author:作者

2.url:博客的链接

3.content:文章内容

4.release_date:发布时间

5.title:文章标题

输出详细字段信息举例如下:

{
    "abstract": "我家屋子,坐南朝北,四周环山,每一日晨间第一缕阳光,落在我家的墙,穿过窗子,落在房里。只是阳光总是无处不在,也不知道从哪个地方,就悄悄钻进了水底,隔着冰轻轻地晃动,好看。",
    "author": "冯家顶的风格",
    "class17": "",
    "class23": "",
    "content": "  冯家顶的冬天,寒冰三尺,灿烂千阳。
  我家屋子,坐南朝北,四周环山,每一日晨间第一缕阳光,落在我家的墙,穿过窗子,落在房里。
  还没醒的时候,就睡在如此的阳光边上,那种温暖,大概梦里都是暖的。
  于此同时,阳光也落在了门前的鱼塘,只是鱼塘轻轻地结了一层冰,阳光大概也没料到有冰的存在,一头撞在冰上,碎了一个冰面的阳光,打着滚,散落到处。
  只是阳光总是无处不在,也不知道从哪个地方,就悄悄钻进了水底,隔着冰轻轻地晃动,好看。
  果子妈蹲在水边,有手指戳戳,这是冰嘛。那一场景十分温暖,拍下来的时候,冰都消融的见不着了,多美。
  阳光落在墙上,也落在门前的雪里,蹲在雪地里,望着我家的房子,雪光,阳光,似乎像隐了一层淡淡的雾,又觉得是一种散,月光散,阳光散,散落人间,散落门前。
  散落在屋顶的时候,还未融化的雪,泛着点点的光,露出的瓦片一道道,一行行,像最美的文字。
  直到傍晚,夕阳的余晖落在门前的雪上,一下子让雪变得轻柔,洁白,美好,任谁都不愿意落脚。
  阳光全无时,山里还未黑,一下子整个的山庄突然安静下来,变得宁静安详,所有的人们得活在这样的时空里温暖的房子里。
  冯家顶的夜,在寒冬里,静静地,家里暖暖的。",
    "content_crc": "2362279561466737006",
    "content_media_name": "新浪博客",
    "download_date": "2018-3-9 9:49:11",
    "format_content": "<p taggedby="hylanda">  冯家顶的冬天,寒冰三尺,灿烂千阳。</p taggedby="hylanda">
<p taggedby="hylanda">  我家屋子,坐南朝北,四周环山,每一日晨间第一缕阳光,落在我家的墙,穿过窗子,落在房里。</p taggedby="hylanda">
<p taggedby="hylanda">  还没醒的时候,就睡在如此的阳光边上,那种温暖,大概梦里都是暖的。</p taggedby="hylanda">
<p taggedby="hylanda">  于此同时,阳光也落在了门前的鱼塘,只是鱼塘轻轻地结了一层冰,阳光大概也没料到有冰的存在,一头撞在冰上,碎了一个冰面的阳光,打着滚,散落到处。</p taggedby="hylanda">
<p taggedby="hylanda">  只是阳光总是无处不在,也不知道从哪个地方,就悄悄钻进了水底,隔着冰轻轻地晃动,好看。</p taggedby="hylanda">
<p taggedby="hylanda">  果子妈蹲在水边,有手指戳戳,这是冰嘛。那一场景十分温暖,拍下来的时候,冰都消融的见不着了,多美。</p taggedby="hylanda">
<p taggedby="hylanda">  阳光落在墙上,也落在门前的雪里,蹲在雪地里,望着我家的房子,雪光,阳光,似乎像隐了一层淡淡的雾,又觉得是一种散,月光散,阳光散,散落人间,散落门前。</p taggedby="hylanda">
<p taggedby="hylanda">  散落在屋顶的时候,还未融化的雪,泛着点点的光,露出的瓦片一道道,一行行,像最美的文字。</p taggedby="hylanda">
<p taggedby="hylanda">  直到傍晚,夕阳的余晖落在门前的雪上,一下子让雪变得轻柔,洁白,美好,任谁都不愿意落脚。</p taggedby="hylanda">
<p taggedby="hylanda">  阳光全无时,山里还未黑,一下子整个的山庄突然安静下来,变得宁静安详,所有的人们得活在这样的时空里温暖的房子里。</p taggedby="hylanda">
<p taggedby="hylanda">  冯家顶的夜,在寒冬里,静静地,家里暖暖的。</p taggedby="hylanda">",
    "from_flag": "h2x_metasearch_0",
    "keywords": "千阳 冯家 阳光 我家 环山 月光 夕阳 多美 鱼塘 余晖",
    "lastmodify_date": "2018-3-7 21:21:40",
    "media_name": "新浪博客",
    "multi_page": "{"page_cnt":"1","page_info":[{"status":"0","url":"http://blog.sina.com.cn/u/52516e410102xiew"}]}",
    "navigation": "冯家顶。寒冰三尺,灿烂千阳>冯家顶的风格>新浪博客",
    "original_media_name": "",
    "original_media_url": "",
    "other_content": "",
    "other_page": "http://blog.sina.com.cn/u/52516e410102xiew",
    "page_title": "冯家顶。寒冰三尺,灿烂千阳_冯家顶的风格_新浪博客",
    "picture_description": "",
    "picture_list": "",
    "refer_source_type": "2",
    "refer_url": "http://search.sina.com.cn/?c=blog&q=%B2%D3%C0%C3%C7%A7%D1%F4&range=article&by=&sort=time&col=&source=&from=&country=&size=&time=&a=&isown=false",
    "rel_type": "m",
    "release_date": "2018-02-04 22:09:22",
    "sensitive_words": "",
    "source_type": "268435460",
    "tags": "阳光/NT/0.168823 果子/NT/0.090596 窗子/NT/0.084728",
    "title": "冯家顶。寒冰三尺,灿烂千阳",
    "title_crc": "15976037444283030176",
    "url": "http://blog.sina.com.cn/u/52516e410102xiew"
}

相关能力

参考指标

  • 数据质量:准确率:99.9%;及时率:7200条/小时之内为100%(任务量越大,及时率越低)

  • 处理性能:7200条/小时

CPU:4 内存:4G

附加说明

隐藏参数说明

results matching ""

    No results matching ""