From ddcf3951458b7ba1ecd5382dbf37050cc56236aa Mon Sep 17 00:00:00 2001 From: wufayuan <2858767122@qq.com> Date: Fri, 8 Jul 2022 09:34:38 +0800 Subject: [PATCH] =?UTF-8?q?=E5=B0=86=E7=88=AC=E8=99=AB=E9=87=87=E9=9B=86?= =?UTF-8?q?=E5=99=A8=E6=9B=BF=E6=8D=A2=E5=B9=B6=E5=B5=8C=E5=85=A5=E5=90=88?= =?UTF-8?q?=E5=B9=B6=E5=88=B0=E7=B3=BB=E7=BB=9F=E4=B8=AD=EF=BC=8C=E5=A4=A7?= =?UTF-8?q?=E5=B9=85=E5=BA=A6=E6=8F=90=E9=AB=98=E7=88=AC=E5=8F=96=E9=80=9F?= =?UTF-8?q?=E5=BA=A6?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- conf/settings.ini | 3 +- dcs/clients/client.py | 43 +- dcs/clients/clients.py | 2 +- dcs/dcs.log | 565 ++++++++++++++++++++++++++ dcs/tests/fastcrawler.py | 123 ++++-- dcs/tests/spider_task.py | 50 +-- dcs/tests/zhiwang.py | 2 +- dcs/tools/database.py | 2 +- ui/result.json | 856 +-------------------------------------- 9 files changed, 685 insertions(+), 961 deletions(-) diff --git a/conf/settings.ini b/conf/settings.ini index cd74aaa..3afd3ce 100644 --- a/conf/settings.ini +++ b/conf/settings.ini @@ -5,11 +5,10 @@ daemon = True buffer_size = 8 * 1024 * 1024 [crawler] -edge_driver_path = G:\course\yykf\dcs\bin\msedgedriver.exe max_count_of_crawlers = 10 [database] -ip = 192.168.43.64 +ip = 192.168.43.65 user = root password = 427318Aa database = test diff --git a/dcs/clients/client.py b/dcs/clients/client.py index f2d4d96..d2d8078 100644 --- a/dcs/clients/client.py +++ b/dcs/clients/client.py @@ -2,54 +2,25 @@ import json import multiprocessing import socket import struct -from configparser import ConfigParser from json import JSONDecoder -from msedge.selenium_tools import Edge -from msedge.selenium_tools import EdgeOptions - -from dcs.tests.zhiwang import * +from dcs.tests.fastcrawler import * from dcs.tools import message_process as mp from dcs.tools.message_process import parse_request, generate_response def crawl_zhiwang(word, pages_start, pages_end): logger.info(f'[CRAWLER] crawling pages {pages_start}-{pages_end} of keyword {word}...') - edge_options = EdgeOptions() - edge_options.use_chromium = True - No_Image_loading = {"profile.managed_default_content_settings.images": 2, 'permissions.default.stylesheet': 2} - edge_options.add_experimental_option("prefs", No_Image_loading) - edge_options.add_argument('--headless') - configFile = '../../conf/settings.ini' - con = ConfigParser() - con.read(configFile, encoding='utf-8') - items = con.items('crawler') - items = dict(items)['edge_driver_path'] - # print(items) - driver = Edge(options=edge_options, executable_path=items) - - soup = driver_open(driver, word) - papers = [] # 用于保存爬取到的论文 - paper_id = 0 + logger.info(f'[CRAWLER] local crawler is starting...') res = {} # 保存终端爬取结果 - - # 爬取第一篇 - if pages_start == 1: - spider(driver, soup, papers) - pages_start += 1 - while paper_id < len(papers): - write2res(papers[paper_id], res) - paper_id += 1 + fast_crawler = Fast_crawler() while pages_start < pages_end: - content = change_page(driver, pages_start) - spider(driver, content, papers) - while paper_id < len(papers): - write2res(papers[paper_id], res) - paper_id += 1 + papers = fast_crawler.crawl(word, pages_start) + for paper in papers: + write2res(paper, res) pages_start += 1 - driver.close() - return res + return res def write2res(paper: Paper, res): diff --git a/dcs/clients/clients.py b/dcs/clients/clients.py index b070495..c2fa6e2 100644 --- a/dcs/clients/clients.py +++ b/dcs/clients/clients.py @@ -9,7 +9,7 @@ port = 7777 local_ip = ip local_port = None # 开启的分布节点数量 -count = 5 +count = 3 if __name__ == '__main__': clients = [] diff --git a/dcs/dcs.log b/dcs/dcs.log index f9ca91d..d33993a 100644 --- a/dcs/dcs.log +++ b/dcs/dcs.log @@ -44491,3 +44491,568 @@ from unknown error: web view not found 2022-07-07 23:32:10.697 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 31st crawl results! 2022-07-07 23:32:11.431 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 53915): {'crawl_id': 31, 'table_name': 'tzl_crawl_result', 'data': [('孟云飞', '哈尔滨职业技术学院', '计算机软件及计算机应用;轻工业手工业;教育理论与教育管理;', '计算机系统与信息管理融合发展研究'), ('孟云飞', '哈尔滨职业技术学院', '计算机软件及计算机应用;轻工业手工业;教育理论与教育管理;', '计算机系统与信息管理融合发展研究'), ('张伟鹏', '陕西科技大学', '计算机硬件技术;', '计算机科学与技术的应用现状与未来趋势'), ('张伟鹏', '陕西科技大学', '计算机硬件技术;', '计算机科学与技术的应用现状与未来趋势'), ('郭惠', '山西旅游职业学院', '计算机软件及计算机应用;互联网技术;矿业工程;', '大数据背景下高校计算机专业创新教学思路与方法'), ('郭惠', '山西旅游职业学院', '计算机软件及计算机应用;互联网技术;矿业工程;', '大数据背景下高校计算机专业创新教学思路与方法'), ('王璞', '中国航空工业总公司航空计算技术研究所', '航空航天科学与工程;', '一种嵌入式飞控计算机产品验收系统设计'), ('阮婷', '中国航空工业总公司航空计算技术研究所', '航空航天科学与工程;', '一种嵌入式飞控计算机产品验收系统设计'), ('马倩', '中国航空工业总公司航空计算技术研究所', '航空航天科学与工程;', '一种嵌入式飞控计算机产品验收系统设计'), ('王璞', '中国航空工业总公司航空计算技术研究所', '航空航天科学与工程;', '一种嵌入式飞控计算机产品验收系统设计'), ('阮婷', '中国航空工业总公司航空计算技术研究所', '航空航天科学与工程;', '一种嵌入式飞控计算机产品验收系统设计'), ('马倩', '中国航空工业总公司航空计算技术研究所', '航空航天科学与工程;', '一种嵌入式飞控计算机产品验收系统设计'), ('袁炳夏', '惠州学院', '计算机软件及计算机应用;互联网技术;自动化技术;', '深度学习算法下的计算机网络安全性探究'), ('袁炳夏', '惠州学院', '计算机软件及计算机应用;互联网技术;自动化技术;', '深度学习算法下的计算机网络安全性探究'), ('刘仪', '', '互联网技术;自动化技术;', '人工智能时代计算机信息安全与防护研究'), ('刘仪', '', '互联网技术;自动化技术;', '人工智能时代计算机信息安全与防护研究'), ('吴家存', '江苏商贸职业学院', '互联网技术;计算机软件及计算机应用;物理学;', '试谈大数据时代的计算机网络安全及防范措施'), ('吴家存', '江苏商贸职业学院', '互联网技术;计算机软件及计算机应用;物理学;', '试谈大数据时代的计算机网络安全及防范措施'), ('陈杰', '武汉工程大学', '互联网技术;', '计算机网络安全技术的影响因素研究'), ('陈杰', '武汉工程大学', '互联网技术;', '计算机网络安全技术的影响因素研究'), ('胡园园', '江西省电子信息工程学校', '工业通用技术及设备;计算机硬件技术;互联网技术;', '计算机网络信息安全影响因素及防范措施分析'), ('熊佳威', '江西省电子信息技师学院', '互联网技术;', '计算机网络信息安全影响因素及防范措施分析'), ('胡园园', '江西省电子信息工程学校', '工业通用技术及设备;计算机硬件技术;互联网技术;', '计算机网络信息安全影响因素及防范措施分析'), ('熊佳威', '江西省电子信息技师学院', '互联网技术;', '计算机网络信息安全影响因素及防范措施分析'), ('葛绍建', '安徽亳州新能源学校', '机械工业;自动化技术;农业工程;', '基于农业机械专业的机械制图与计算机制图的融合研究'), ('葛绍建', '安徽亳州新能源学校', '机械工业;自动化技术;农业工程;', '基于农业机械专业的机械制图与计算机制图的融合研究'), ('许天', '黑龙江交通职业技术学院', '工业通用技术及设备;', '计算机辅助设计在文创产品设计中的运用'), ('许天', '黑龙江交通职业技术学院', '工业通用技术及设备;', '计算机辅助设计在文创产品设计中的运用'), ('赵芳宁', '宁夏大学', '高等教育;', '关于高校计算机实验室管理与维护的思考'), ('赵芳宁', '宁夏大学', '高等教育;', '关于高校计算机实验室管理与维护的思考'), ('余清', '信阳职业技术学院', '计算机软件及计算机应用;建筑科学与工程;互联网技术;', '人工智能在计算机网络技术中的运用'), ('余清', '信阳职业技术学院', '计算机软件及计算机应用;建筑科学与工程;互联网技术;', '人工智能在计算机网络技术中的运用'), ('郭玉', '新疆轻工职业技术学院', '电信技术;教育理论与教育管理;职业教育;', '计算机网络安全策略与技术的分析'), ('郭玉', '新疆轻工职业技术学院', '电信技术;教育理论与教育管理;职业教育;', '计算机网络安全策略与技术的分析'), ('张玲', '长春职业技术学院', '职业教育;计算机硬件技术;互联网技术;', '人工智能在计算机网络技术中的应用优势研究'), ('张玲', '长春职业技术学院', '职业教育;计算机硬件技术;互联网技术;', '人工智能在计算机网络技术中的应用优势研究'), ('赵运策', '南京六合中等专业学校', '互联网技术;', '计算机网络安全中虚拟网络技术的应用与思考'), ('赵运策', '南京六合中等专业学校', '互联网技术;', '计算机网络安全中虚拟网络技术的应用与思考'), ('刘玲', '河北轨道运输职业技术学院', '互联网技术;自动化技术;', '计算机通信网络安全隐患及其对策探讨'), ('刘玲', '河北轨道运输职业技术学院', '互联网技术;自动化技术;', '计算机通信网络安全隐患及其对策探讨'), ('高洋', '大庆方兴油田开发有限责任公司', '计算机软件及计算机应用;', '信息安全环境下计算机软件的开发与应用策略'), ('高洋', '大庆方兴油田开发有限责任公司', '计算机软件及计算机应用;', '信息安全环境下计算机软件的开发与应用策略'), ('金超', '广州华夏职业学院', '计算机软件及计算机应用;互联网技术;高等教育;', '物联网应用技术下计算机网络技术专业建设的探讨'), ('金超', '广州华夏职业学院', '计算机软件及计算机应用;互联网技术;高等教育;', '物联网应用技术下计算机网络技术专业建设的探讨'), ('周辉', '广西松宇企业投资集团有限公司', '企业经济;计算机软件及计算机应用;会计;', '计算机技术用于企业经济管理中的对策'), ('周辉', '广西松宇企业投资集团有限公司', '企业经济;计算机软件及计算机应用;会计;', '计算机技术用于企业经济管理中的对策'), ('陆泉名', '常州大学', '互联网技术;', '计算机网络安全问题的分析与探讨'), ('陆泉名', '常州大学', '互联网技术;', '计算机网络安全问题的分析与探讨'), ('杜海英', '潞安职业技术学院', '计算机硬件技术;职业教育;互联网技术;', '计算机应用软件自动化开发技术分析'), ('杜海英', '潞安职业技术学院', '计算机硬件技术;职业教育;互联网技术;', '计算机应用软件自动化开发技术分析'), ('张笳鸣', '上海立达学院', '计算机软件及计算机应用;', '计算机软件技术在大数据发展中的应用'), ('张笳鸣', '上海立达学院', '计算机软件及计算机应用;', '计算机软件技术在大数据发展中的应用'), ('吴述银', '蚌埠医学院', '高等教育;医学教育与医学边缘学科;医药卫生方针政策与法律法规研究;', '审核评估背景下某医学院校计算机化考试现况分析'), ('高梦蝶', '蚌埠医学院', '建筑科学与工程;有机化工;高等教育;', '审核评估背景下某医学院校计算机化考试现况分析'), ('苏园', '蚌埠医学院', '高等教育;', '审核评估背景下某医学院校计算机化考试现况分析'), ('吴述银', '蚌埠医学院', '高等教育;医学教育与医学边缘学科;医药卫生方针政策与法律法规研究;', '审核评估背景下某医学院校计算机化考试现况分析'), ('高梦蝶', '蚌埠医学院', '建筑科学与工程;有机化工;高等教育;', '审核评估背景下某医学院校计算机化考试现况分析'), ('苏园', '蚌埠医学院', '高等教育;', '审核评估背景下某医学院校计算机化考试现况分析'), ('覃竞', '新疆体育职业技术学院', '宏观经济管理与可持续发展;建筑科学与工程;贸易经济;', '计算机网络维护工作和管理策略探讨'), ('覃竞', '新疆体育职业技术学院', '宏观经济管理与可持续发展;建筑科学与工程;贸易经济;', '计算机网络维护工作和管理策略探讨'), ('张雪英', '忻州师范学院', '计算机软件及计算机应用;力学;互联网技术;', '计算机网络信息安全及其防护对策研究'), ('张雪英', '忻州师范学院', '计算机软件及计算机应用;力学;互联网技术;', '计算机网络信息安全及其防护对策研究'), ('李浩铭', '哈尔滨理工大学', '计算机软件及计算机应用;互联网技术;', '大数据时代计算机网络安全技术应用分析'), ('乔桂林', '哈尔滨理工大学', '计算机软件及计算机应用;互联网技术;', '大数据时代计算机网络安全技术应用分析'), ('李浩铭', '哈尔滨理工大学', '计算机软件及计算机应用;互联网技术;', '大数据时代计算机网络安全技术应用分析'), ('乔桂林', '哈尔滨理工大学', '计算机软件及计算机应用;互联网技术;', '大数据时代计算机网络安全技术应用分析'), ('杨兵', '湖北省宜都市职业教育中心', '互联网技术;', '计算机网络信息安全及其防护对策研究'), ('杨兵', '湖北省宜都市职业教育中心', '互联网技术;', '计算机网络信息安全及其防护对策研究'), ('杨智标', '中共广东省信宜市委党校', '中国共产党;计算机软件及计算机应用;新闻与传媒;', '大数据环境下计算机软件技术的应用研究'), ('杨智标', '中共广东省信宜市委党校', '中国共产党;计算机软件及计算机应用;新闻与传媒;', '大数据环境下计算机软件技术的应用研究'), ('曲亮', '吉林省四平市体育彩票管理中心', '计算机软件及计算机应用;互联网技术;计算机硬件技术;', '虚拟机技术在计算机机房管理中的应用探讨'), ('曲亮', '吉林省四平市体育彩票管理中心', '计算机软件及计算机应用;互联网技术;计算机硬件技术;', '虚拟机技术在计算机机房管理中的应用探讨'), ('任晓霞', '鹤壁技师学院', '计算机硬件技术;', '计算机信息技术的发展方向及其实际应用'), ('任晓霞', '鹤壁技师学院', '计算机硬件技术;', '计算机信息技术的发展方向及其实际应用'), ('厉恺', None, None, '计算机网络通信技术故障及处理分析'), ('厉恺', None, None, '计算机网络通信技术故障及处理分析'), ('崔亮亮', '甘肃省平凉机电工程学校', '计算机硬件技术;计算机软件及计算机应用;互联网技术;', '大数据时代背景下计算机信息处理技术的分析'), ('崔亮亮', '甘肃省平凉机电工程学校', '计算机硬件技术;计算机软件及计算机应用;互联网技术;', '大数据时代背景下计算机信息处理技术的分析'), ('吴塍勤', '宜兴高等职业技术学校', '计算机硬件技术;计算机软件及计算机应用;互联网技术;', '“互联网+”时代背景下计算机应用技术改革的思考'), ('吴塍勤', '宜兴高等职业技术学校', '计算机硬件技术;计算机软件及计算机应用;互联网技术;', '“互联网+”时代背景下计算机应用技术改革的思考'), ('刘文杰', '中国地质调查局廊坊自然资源综合调查中心', '计算机软件及计算机应用;互联网技术;', '在信息工程中计算机网络技术的综合应用'), ('刘小娇', '中国地质调查局廊坊自然资源综合调查中心', '计算机软件及计算机应用;互联网技术;', '在信息工程中计算机网络技术的综合应用'), ('付猛', '中国地质调查局廊坊自然资源综合调查中心', '计算机软件及计算机应用;互联网技术;', '在信息工程中计算机网络技术的综合应用'), ('刘文杰', '中国地质调查局廊坊自然资源综合调查中心', '计算机软件及计算机应用;互联网技术;', '在信息工程中计算机网络技术的综合应用'), ('刘小娇', '中国地质调查局廊坊自然资源综合调查中心', '计算机软件及计算机应用;互联网技术;', '在信息工程中计算机网络技术的综合应用'), ('付猛', '中国地质调查局廊坊自然资源综合调查中心', '计算机软件及计算机应用;互联网技术;', '在信息工程中计算机网络技术的综合应用'), ('王莉红', '', '建筑科学与工程;电信技术;计算机软件及计算机应用;', '基于网络信息安全技术管理的计算机应用研究'), ('王莉红', '', '建筑科学与工程;电信技术;计算机软件及计算机应用;', '基于网络信息安全技术管理的计算机应用研究'), ('郝晓康', '江苏财经职业技术学院', '互联网技术;计算机软件及计算机应用;计算机硬件技术;', '基于网络安全维护的计算机网络安全技术应用'), ('郝晓康', '江苏财经职业技术学院', '互联网技术;计算机软件及计算机应用;计算机硬件技术;', '基于网络安全维护的计算机网络安全技术应用'), ('宋洪喜', '大庆油田公司设计研究院', '计算机软件及计算机应用;石油天然气工业;工业经济;', '油田企业计算机管理维护现状与优化对策研究'), ('宋洪喜', '大庆油田公司设计研究院', '计算机软件及计算机应用;石油天然气工业;工业经济;', '油田企业计算机管理维护现状与优化对策研究'), ('黄文向', '广东省梅州市广播电视台', '新闻与传媒;计算机硬件技术;互联网技术;', '电视台计算机硬盘播出系统的技术应用分析'), ('黄文向', '广东省梅州市广播电视台', '新闻与传媒;计算机硬件技术;互联网技术;', '电视台计算机硬盘播出系统的技术应用分析'), ('叶奕成', '浙江理工大学', '计算机软件及计算机应用;互联网技术;', '大数据时代的计算机网络安全及防范对策'), ('叶奕成', '浙江理工大学', '计算机软件及计算机应用;互联网技术;', '大数据时代的计算机网络安全及防范对策')], 'type': 'response'} 2022-07-07 23:32:11.775 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('192.168.43.64', 53915)! +2022-07-08 09:04:11.695 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:04:20.706 | INFO | dcs.server:run:25 - [SERVER] connected to client ('127.0.0.1', 55322) +2022-07-08 09:04:20.706 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('127.0.0.1', 55322)! +2022-07-08 09:04:20.816 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:04:20.816 | INFO | dcs.tests.spider_task:distribute_task:103 - [TASK] distributing task: (('127.0.0.1', 55322), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:04:20.816 | INFO | dcs.tests.spider_task:run:145 - [REMOTE] free nodes: [] +2022-07-08 09:04:20.816 | WARNING | dcs.tests.spider_task:run:163 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} is at state waiting... +2022-07-08 09:04:20.816 | INFO | dcs.tests.spider_task:run:164 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} +2022-07-08 09:04:20.816 | WARNING | dcs.tests.spider_task:run:163 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} is at state waiting... +2022-07-08 09:04:20.816 | INFO | dcs.tests.spider_task:run:164 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} +2022-07-08 09:04:20.825 | DEBUG | dcs.tests.spider_task:test_simulation:44 - simulation crawling... +2022-07-08 09:04:20.833 | DEBUG | dcs.tests.spider_task:test_simulation:44 - simulation crawling... +2022-07-08 09:04:21.825 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55322): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:04:25.836 | INFO | dcs.tests.spider_task:run:145 - [REMOTE] free nodes: [] +2022-07-08 09:04:30.833 | INFO | dcs.tests.spider_task:run:61 - [TASK] local partial crawl task finished: (('127.0.0.1', 55322), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'}) +2022-07-08 09:04:30.849 | INFO | dcs.tests.spider_task:run:145 - [REMOTE] free nodes: [] +2022-07-08 09:04:30.849 | INFO | dcs.tests.spider_task:run:61 - [TASK] local partial crawl task finished: (('127.0.0.1', 55322), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:04:35.858 | INFO | dcs.tests.spider_task:run:145 - [REMOTE] free nodes: [] +2022-07-08 09:04:35.858 | INFO | dcs.tests.spider_task:compose_result:123 - [COMPOSE] composing task... +2022-07-08 09:04:35.858 | INFO | dcs.tests.spider_task:compose_result:130 - [RESULT] [('test', 'test', 'test', 'test'), ('test', 'test', 'test', 'test'), ('test', 'test', 'test', 'test'), ('test', 'test', 'test', 'test'), ('test', 'test', 'test', 'test'), ('test', 'test', 'test', 'test')] +2022-07-08 09:04:35.858 | INFO | dcs.tests.spider_task:compose_result:131 - [DATABASE] writing crawl results to database... +2022-07-08 09:04:35.858 | INFO | dcs.tools.database:write_results2database:203 - [DATABASE] writing 72st crawl results to table god_crawl_result in database... +2022-07-08 09:04:35.858 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 72st crawl results! +2022-07-08 09:04:35.952 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55322): {'crawl_id': 72, 'table_name': 'god_crawl_result', 'type': 'response'} +2022-07-08 09:04:35.952 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('127.0.0.1', 55322)! +2022-07-08 09:05:36.261 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:05:38.566 | INFO | dcs.server:run:25 - [SERVER] connected to client ('127.0.0.1', 55370) +2022-07-08 09:05:38.566 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('127.0.0.1', 55370)! +2022-07-08 09:05:39.308 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:05:39.308 | INFO | dcs.tests.spider_task:distribute_task:104 - [TASK] distributing task: (('127.0.0.1', 55370), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:05:39.308 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [] +2022-07-08 09:05:39.308 | WARNING | dcs.tests.spider_task:run:164 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} is at state waiting... +2022-07-08 09:05:39.308 | INFO | dcs.tests.spider_task:run:165 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} +2022-07-08 09:05:39.308 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:05:39.308 | WARNING | dcs.tests.spider_task:run:164 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} is at state waiting... +2022-07-08 09:05:39.308 | INFO | dcs.tests.spider_task:run:165 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} +2022-07-08 09:05:39.308 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:05:39.308 | ERROR | dcs.tests.spider_task:run:60 - [ERROR] name 'crawler' is not defined +2022-07-08 09:05:39.308 | INFO | dcs.tests.spider_task:run:62 - [TASK] local partial crawl task finished: (('127.0.0.1', 55370), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:05:39.308 | ERROR | dcs.tests.spider_task:run:60 - [ERROR] name 'crawler' is not defined +2022-07-08 09:05:39.308 | INFO | dcs.tests.spider_task:run:62 - [TASK] local partial crawl task finished: (('127.0.0.1', 55370), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'}) +2022-07-08 09:05:40.315 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55370): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:05:44.313 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [] +2022-07-08 09:05:44.313 | WARNING | dcs.tests.spider_task:run:164 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} is at state waiting... +2022-07-08 09:05:44.313 | INFO | dcs.tests.spider_task:run:165 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} +2022-07-08 09:05:44.313 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:05:44.313 | WARNING | dcs.tests.spider_task:run:164 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} is at state waiting... +2022-07-08 09:05:44.313 | INFO | dcs.tests.spider_task:run:165 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} +2022-07-08 09:05:44.313 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:05:44.313 | ERROR | dcs.tests.spider_task:run:60 - [ERROR] name 'crawler' is not defined +2022-07-08 09:05:44.313 | INFO | dcs.tests.spider_task:run:62 - [TASK] local partial crawl task finished: (('127.0.0.1', 55370), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'}) +2022-07-08 09:05:44.313 | ERROR | dcs.tests.spider_task:run:60 - [ERROR] name 'crawler' is not defined +2022-07-08 09:05:44.313 | INFO | dcs.tests.spider_task:run:62 - [TASK] local partial crawl task finished: (('127.0.0.1', 55370), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:08:45.843 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:08:48.739 | INFO | dcs.server:run:25 - [SERVER] connected to client ('127.0.0.1', 55462) +2022-07-08 09:08:48.755 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('127.0.0.1', 55462)! +2022-07-08 09:08:48.882 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:08:48.882 | INFO | dcs.tests.spider_task:distribute_task:105 - [TASK] distributing task: (('127.0.0.1', 55462), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:08:48.882 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:08:48.882 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} is at state waiting... +2022-07-08 09:08:48.882 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} +2022-07-08 09:08:49.890 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55462): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:09:26.779 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:09:30.057 | INFO | dcs.server:run:25 - [SERVER] connected to client ('127.0.0.1', 55484) +2022-07-08 09:09:30.057 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('127.0.0.1', 55484)! +2022-07-08 09:09:30.830 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:09:30.830 | INFO | dcs.tests.spider_task:distribute_task:105 - [TASK] distributing task: (('127.0.0.1', 55484), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:09:30.830 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:09:30.830 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} is at state waiting... +2022-07-08 09:09:30.830 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} +2022-07-08 09:09:30.830 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:09:30.830 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} is at state waiting... +2022-07-08 09:09:30.830 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} +2022-07-08 09:09:30.830 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:09:31.507 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/JFXG202204007.html +2022-07-08 09:09:31.622 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/ZDDY20220301007.html +2022-07-08 09:09:31.836 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55484): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:09:32.042 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/ZGWL202204103.html +2022-07-08 09:09:32.073 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/GXKB202111002.html +2022-07-08 09:09:32.496 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/GOCH202202002.html +2022-07-08 09:09:32.607 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/JYSB202124018.html +2022-07-08 09:09:33.006 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/XNXS202202002.html +2022-07-08 09:09:33.038 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/EEEV202201001.html +2022-07-08 09:09:33.401 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/GOCH202112018.html +2022-07-08 09:09:33.433 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/WYDH200802004.html +2022-07-08 09:09:33.843 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/GOCH202111011.html +2022-07-08 09:09:33.890 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/HWYY201103138.html +2022-07-08 09:09:34.268 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/XNXS202101002.html +2022-07-08 09:09:34.315 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/JFXG202102018.html +2022-07-08 09:09:34.694 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/JEXG202202015.html +2022-07-08 09:09:34.725 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/YYZS199908031.html +2022-07-08 09:09:35.104 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/ZHGC202201032.html +2022-07-08 09:09:35.120 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/YYZS199806028.html +2022-07-08 09:09:35.538 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/YYZS199602032.html +2022-07-08 09:09:35.609 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Journal/Article/ZGTO202202005.html +2022-07-08 09:09:35.847 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:09:35.973 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0045381.html +2022-07-08 09:09:35.989 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0069758.html +2022-07-08 09:09:35.989 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047819589&name=Chris Palmer +2022-07-08 09:09:35.989 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0188644.html +2022-07-08 09:09:35.989 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0246359.html +2022-07-08 09:09:35.989 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/1020361.html +2022-07-08 09:09:35.989 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0038515.html +2022-07-08 09:09:35.989 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Article/Search?kw=赵忠德&order=0&db=&field=4 +2022-07-08 09:09:36.004 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Article/Search?kw=赵忠德&order=0&db=&field=4 +2022-07-08 09:09:36.004 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Article/Search?kw=崔涛&order=0&db=&field=4 +2022-07-08 09:09:36.052 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0000038.html +2022-07-08 09:09:36.068 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0075064.html +2022-07-08 09:09:36.068 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0237379.html +2022-07-08 09:09:36.068 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0237439.html +2022-07-08 09:09:36.068 | WARNING | dcs.tests.fastcrawler:parse_paper_html:118 - [PARSE] paper parser can not find authors info! +2022-07-08 09:09:36.068 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0265717.html +2022-07-08 09:09:36.068 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0143551.html +2022-07-08 09:09:36.068 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0512522.html +2022-07-08 09:09:36.084 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0127240.html +2022-07-08 09:09:36.084 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0149444.html +2022-07-08 09:09:36.570 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:36.570 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0264552.html +2022-07-08 09:09:36.570 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:36.570 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000005089491&name=孔珍珍 +2022-07-08 09:09:36.742 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:36.759 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:36.790 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:36.806 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:36.821 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:36.900 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:36.963 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:36.979 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.088 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.104 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.104 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.143 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.151 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.151 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0165468.html +2022-07-08 09:09:37.167 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/1020355.html +2022-07-08 09:09:37.198 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Article/Search?kw=周淼&order=0&db=&field=4 +2022-07-08 09:09:37.214 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.214 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0054402.html +2022-07-08 09:09:37.293 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0086087.html +2022-07-08 09:09:37.293 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.308 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/1768956.html +2022-07-08 09:09:37.308 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0180857.html +2022-07-08 09:09:37.308 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047845983&name=葛阳阳 +2022-07-08 09:09:37.308 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000014543314&name=Zhang Lingxin +2022-07-08 09:09:37.308 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/1701673.html +2022-07-08 09:09:37.344 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.344 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0610673.html +2022-07-08 09:09:37.355 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000041572949&name=李莉华 +2022-07-08 09:09:37.355 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/1698842.html +2022-07-08 09:09:37.355 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0009404.html +2022-07-08 09:09:37.570 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.570 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047708031&name=Haochen HU +2022-07-08 09:09:37.710 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000044182327&name=Shen Junkai +2022-07-08 09:09:37.758 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.758 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/2018149.html +2022-07-08 09:09:37.789 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047845986&name=王治昱 +2022-07-08 09:09:37.805 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.805 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047443613&name=Rui BIAN +2022-07-08 09:09:37.868 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:37.868 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0180964.html +2022-07-08 09:09:37.899 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.071 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.071 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000021552862&name=Jianhua TAO +2022-07-08 09:09:38.228 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.228 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000043639798&name=Ren Noguchi +2022-07-08 09:09:38.275 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.275 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000046079227&name=Yu Zhang +2022-07-08 09:09:38.291 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.291 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000001830639&name=Biao WU +2022-07-08 09:09:38.338 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.338 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/1509775.html +2022-07-08 09:09:38.347 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.347 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0010016.html +2022-07-08 09:09:38.354 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.401 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000044182328&name=Zhu Baijie +2022-07-08 09:09:38.401 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Organization/List/0081222.html +2022-07-08 09:09:38.401 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.416 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000000227122&name=LIU Bo +2022-07-08 09:09:38.432 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000028259988&name=郑文 +2022-07-08 09:09:38.558 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047443612&name=Lubin MENG +2022-07-08 09:09:38.589 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000000210920&name=Yue LIU +2022-07-08 09:09:38.888 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.888 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000015088721&name=Minpeng Xu +2022-07-08 09:09:38.919 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000014616521&name=Kohei Suzuki +2022-07-08 09:09:38.934 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000015473466&name=YANG MengFei +2022-07-08 09:09:38.951 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047319155&name=Huaqing Li +2022-07-08 09:09:38.951 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:38.951 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000000103555&name=Jingjing Wang +2022-07-08 09:09:38.982 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000011553314&name=Hanbo CHEN +2022-07-08 09:09:39.029 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000011963752&name=Dongrui WU +2022-07-08 09:09:39.048 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047708032&name=Kang YUE +2022-07-08 09:09:39.048 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:39.048 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000020490864&name=Chunxia Qiao +2022-07-08 09:09:39.139 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:09:39.139 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000043747099&name=Qinjun Qiu +2022-07-08 09:09:39.391 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000010506136&name=Zhikang LUO +2022-07-08 09:09:39.407 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000004057557&name=Feng He +2022-07-08 09:09:39.422 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000007223789&name=WANG Yong +2022-07-08 09:09:39.438 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000001488030&name=Ming Lv +2022-07-08 09:09:39.454 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047319154&name=Heng Dong +2022-07-08 09:09:39.454 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000043986390&name=Yoshiki Moriguchi +2022-07-08 09:09:39.470 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000043747103&name=Zhong Xie +2022-07-08 09:09:39.470 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000045956024&name=Wei Zhao +2022-07-08 09:09:39.737 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000014104272&name=Tzyy-Ping Jung +2022-07-08 09:09:39.895 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047321153&name=Die Zhang +2022-07-08 09:09:39.989 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000021989226&name=Xinying Li +2022-07-08 09:09:39.973 | DEBUG | dcs.tests.fastcrawler:get_html_by_link:95 - //wap.cnki.net/touch/web/Scholar/Index/?code=000047262734&name=Kunpeng Song +2022-07-08 09:09:40.336 | INFO | dcs.tests.spider_task:run:63 - [TASK] local partial crawl task finished: (('127.0.0.1', 55484), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:09:40.336 | INFO | dcs.tests.spider_task:run:63 - [TASK] local partial crawl task finished: (('127.0.0.1', 55484), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'}) +2022-07-08 09:09:40.856 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:09:40.856 | INFO | dcs.tests.spider_task:compose_result:125 - [COMPOSE] composing task... +2022-07-08 09:09:40.856 | INFO | dcs.tests.spider_task:compose_result:132 - [RESULT] [('Chris Palmer', '', '领域:生物学、电信技术、生物医学工程', 'Brain-Computer Interface Speaks Up'), ('筛选', None, None, 'Computer Input Devices for the Disabled'), ('筛选', None, None, 'Voice-Mail Robbery:A Computer Crime'), ('筛选', None, None, 'Computer Systems'), ('筛选', None, None, 'Computer Systems'), ('南京大学', None, None, 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('葛阳阳', '南京大学', '领域:物理学、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('王治昱', '南京大学', '领域:物理学、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('郑文', '南京大学', '领域:物理学、电力工业、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('北京理工大学', None, None, 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('北京电影学院', None, None, 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Haochen HU', '北京理工大学', '领域:生物学、电信技术、生物医学工程', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Yue Liu', '北京电影学院', '领域:计算机软件及计算机应用、自动化技术、临床医学', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Kang YUE', '北京理工大学', '领域:生物学、电信技术、生物医学工程', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('华中科技大学', None, None, 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('之江实验室', None, None, 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Rui BIAN', '华中科技大学', '领域:生物学、电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Lubin MENG', '华中科技大学', '领域:生物学、电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Dongrui Wu', '之江实验室', '领域:电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('北京大学', None, None, 'Board games for quantum computers'), ('上海交通大学', None, None, 'Board games for quantum computers'), ('Biao WU', '北京大学', '领域:物理学、计算机硬件技术', 'Board games for quantum computers'), ('Hanbo CHEN', '北京大学', '领域:计算机硬件技术', 'Board games for quantum computers'), ('Zhikang LUO', '北京大学', '领域:计算机硬件技术', 'Board games for quantum computers'), ('天津大学', None, None, 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('加州大学圣迭戈分校', None, None, 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('南通大学', None, None, 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Minpeng XU', '天津大学', '领域:生物学、基础医学、电信技术', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Feng He', '天津大学', '领域:生物学、基础医学、电信技术', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Tzyy-Ping Jung', '加州大学圣迭戈分校', '领域:生物医学工程、电信技术、神经病学', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('军事医学科学院毒物药...', None, None, 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('军事医学科学院', None, None, 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('北京天广实生物技术股...', None, None, 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('中国科学院力学研究所', None, None, 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Chunxia Qiao', '军事医学科学院毒物药物研究所', '领域:肿瘤学、基础医学、妇产科学', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Ming Lv', '军事医学科学院', '领域:肿瘤学、妇产科学、有机化工', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Xinying Li', '军事医学科学院', '领域:肿瘤学、妇产科学、有机化工', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('广东省碧桂园学校', None, None, 'CAIE中Computer Science考试对信息技术纳入高考的启示'), ('孔珍珍', '广东省碧桂园学校', '领域:中等教育', 'CAIE中Computer Science考试对信息技术纳入高考的启示'), ('东华大学', None, None, 'Opening Moves Involved in Text-based Computer-Mediated-Communication (CMC) by Chinese Adults'), ('李莉华', '东华大学', '领域:外国语言文字、中国语言文字、初等教育', 'Opening Moves Involved in Text-based Computer-Mediated-Communication (CMC) by Chinese Adults'), ('中国科学院自动化研究...', None, None, 'Emotion recognition for human-computer interaction'), ('中国科学院大学', None, None, 'Emotion recognition for human-computer interaction'), ('Jianhua Tao', '中国科学院大学', '领域:计算机软件及计算机应用、中国语言文字、电信技术', 'Emotion recognition for human-computer interaction'), ('中国地震局工程力学研...', None, None, 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Zhang Lingxin', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Shen Junkai', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Zhu Baijie', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('北京市控制工程研究所', None, None, 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('中国空间技术研究院', None, None, 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('Liu bo', '北京市控制工程研究所', '领域:航空航天科学与工程、动力工程、电信技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('Yang Mengfei', '中国空间技术研究院', '领域:航空航天科学与工程、自动化技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('WANG Yong', '北京市控制工程研究所', '领域:航空航天科学与工程、数学、自动化技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('高知大学', None, None, 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('千叶大学', None, None, 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Ren Noguchi', '高知大学', '领域:计算机软件及计算机应用、无线电电子学', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Kohei Suzuki', '高知大学', '领域:计算机软件及计算机应用、无线电电子学', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Yoshiki Moriguchi', '高知大学', '领域:无线电电子学、计算机软件及计算机应用', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('哈尔滨工业大学', None, None, 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('美国亚利桑那州立大学', None, None, 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Yu Zhang', '哈尔滨工业大学', '领域:电信技术、生物学、计算机软件及计算机应用', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Huaqing Li', '哈尔滨工业大学', '领域:生物学、电信技术、自动化技术', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Heng Dong', '哈尔滨工业大学', '领域:生物学、电信技术、自动化技术', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('中国地质大学(武汉)', None, None, 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('武汉大学', None, None, 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('三峡大学', None, None, 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Qinjun Qiu', '中国地质大学(武汉)', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Zhong Xie', '中国地质大学(武汉)', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Die Zhang', '武汉大学', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('中国科学院山西煤炭化...', None, None, 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('中国科学院', None, None, 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('中科合成油工程有限公...', None, None, 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Jingjing WANG', '中国科学院', '领域:生物学、燃料化工、石油天然气工业', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Wei Zhao', '中国科学院', '领域:无线电电子学、生物学、物理学', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Kunpeng Song', '中国科学院', '领域:燃料化工、石油天然气工业', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax')] +2022-07-08 09:09:40.872 | INFO | dcs.tests.spider_task:compose_result:133 - [DATABASE] writing crawl results to database... +2022-07-08 09:09:40.872 | INFO | dcs.tools.database:write_results2database:203 - [DATABASE] writing 73st crawl results to table god_crawl_result in database... +2022-07-08 09:09:40.872 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 73st crawl results! +2022-07-08 09:09:41.028 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55484): {'crawl_id': 73, 'table_name': 'god_crawl_result', 'type': 'response'} +2022-07-08 09:09:41.028 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('127.0.0.1', 55484)! +2022-07-08 09:10:19.171 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:10:21.472 | INFO | dcs.server:run:25 - [SERVER] connected to client ('127.0.0.1', 55613) +2022-07-08 09:10:21.472 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('127.0.0.1', 55613)! +2022-07-08 09:10:22.194 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:10:22.194 | INFO | dcs.tests.spider_task:distribute_task:105 - [TASK] distributing task: (('127.0.0.1', 55613), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:10:22.194 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:10:22.194 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} is at state waiting... +2022-07-08 09:10:22.194 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} +2022-07-08 09:10:22.194 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:10:22.194 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} is at state waiting... +2022-07-08 09:10:22.194 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} +2022-07-08 09:10:22.194 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:10:23.202 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55613): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:10:27.213 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:10:27.544 | WARNING | dcs.tests.fastcrawler:parse_paper_html:118 - [PARSE] paper parser can not find authors info! +2022-07-08 09:10:27.862 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.003 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.003 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.113 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.160 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.207 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.286 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.317 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.082 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.349 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.349 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.411 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.459 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.615 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.663 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.730 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.741 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:28.741 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.056 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.134 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.150 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.291 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.291 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.354 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.401 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.574 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.605 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.652 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.732 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:29.762 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:30.170 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:30.185 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:30.333 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:30.433 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:30.736 | WARNING | dcs.tests.fastcrawler:parse_author_html:134 - [PARSE] author parser can not find personal info +2022-07-08 09:10:31.572 | INFO | dcs.tests.spider_task:run:63 - [TASK] local partial crawl task finished: (('127.0.0.1', 55613), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'}) +2022-07-08 09:10:31.967 | INFO | dcs.tests.spider_task:run:63 - [TASK] local partial crawl task finished: (('127.0.0.1', 55613), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:10:32.219 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:10:32.219 | INFO | dcs.tests.spider_task:compose_result:125 - [COMPOSE] composing task... +2022-07-08 09:10:32.219 | INFO | dcs.tests.spider_task:compose_result:132 - [RESULT] [('广东省碧桂园学校', None, None, 'CAIE中Computer Science考试对信息技术纳入高考的启示'), ('孔珍珍', '广东省碧桂园学校', '领域:中等教育', 'CAIE中Computer Science考试对信息技术纳入高考的启示'), ('东华大学', None, None, 'Opening Moves Involved in Text-based Computer-Mediated-Communication (CMC) by Chinese Adults'), ('李莉华', '东华大学', '领域:外国语言文字、中国语言文字、初等教育', 'Opening Moves Involved in Text-based Computer-Mediated-Communication (CMC) by Chinese Adults'), ('中国地震局工程力学研...', None, None, 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Zhang Lingxin', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Shen Junkai', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Zhu Baijie', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('中国科学院自动化研究...', None, None, 'Emotion recognition for human-computer interaction'), ('中国科学院大学', None, None, 'Emotion recognition for human-computer interaction'), ('Jianhua Tao', '中国科学院大学', '领域:计算机软件及计算机应用、中国语言文字、电信技术', 'Emotion recognition for human-computer interaction'), ('北京市控制工程研究所', None, None, 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('中国空间技术研究院', None, None, 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('Liu bo', '北京市控制工程研究所', '领域:航空航天科学与工程、动力工程、电信技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('Yang Mengfei', '中国空间技术研究院', '领域:航空航天科学与工程、自动化技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('WANG Yong', '北京市控制工程研究所', '领域:航空航天科学与工程、数学、自动化技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('高知大学', None, None, 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('千叶大学', None, None, 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Ren Noguchi', '高知大学', '领域:计算机软件及计算机应用、无线电电子学', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Kohei Suzuki', '高知大学', '领域:计算机软件及计算机应用、无线电电子学', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Yoshiki Moriguchi', '高知大学', '领域:无线电电子学、计算机软件及计算机应用', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('哈尔滨工业大学', None, None, 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('美国亚利桑那州立大学', None, None, 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Yu Zhang', '哈尔滨工业大学', '领域:电信技术、生物学、计算机软件及计算机应用', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Huaqing Li', '哈尔滨工业大学', '领域:生物学、电信技术、自动化技术', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Heng Dong', '哈尔滨工业大学', '领域:生物学、电信技术、自动化技术', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('中国科学院山西煤炭化...', None, None, 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('中国科学院', None, None, 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('中科合成油工程有限公...', None, None, 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Jingjing WANG', '中国科学院', '领域:生物学、燃料化工、石油天然气工业', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Wei Zhao', '中国科学院', '领域:无线电电子学、生物学、物理学', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Kunpeng Song', '中国科学院', '领域:燃料化工、石油天然气工业', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('中国地质大学(武汉)', None, None, 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('武汉大学', None, None, 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('三峡大学', None, None, 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Qinjun Qiu', '中国地质大学(武汉)', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Zhong Xie', '中国地质大学(武汉)', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Die Zhang', '武汉大学', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Chris Palmer', '', '领域:生物学、电信技术、生物医学工程', 'Brain-Computer Interface Speaks Up'), ('筛选', None, None, 'Computer Input Devices for the Disabled'), ('筛选', None, None, 'Voice-Mail Robbery:A Computer Crime'), ('筛选', None, None, 'Computer Systems'), ('筛选', None, None, 'Computer Systems'), ('南京大学', None, None, 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('葛阳阳', '南京大学', '领域:物理学、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('王治昱', '南京大学', '领域:物理学、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('郑文', '南京大学', '领域:物理学、电力工业、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('北京理工大学', None, None, 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('北京电影学院', None, None, 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Haochen HU', '北京理工大学', '领域:生物学、电信技术、生物医学工程', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Yue Liu', '北京电影学院', '领域:计算机软件及计算机应用、自动化技术、临床医学', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Kang YUE', '北京理工大学', '领域:生物学、电信技术、生物医学工程', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('华中科技大学', None, None, 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('之江实验室', None, None, 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Rui BIAN', '华中科技大学', '领域:生物学、电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Lubin MENG', '华中科技大学', '领域:生物学、电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Dongrui Wu', '之江实验室', '领域:电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('北京大学', None, None, 'Board games for quantum computers'), ('上海交通大学', None, None, 'Board games for quantum computers'), ('Biao WU', '北京大学', '领域:物理学、计算机硬件技术', 'Board games for quantum computers'), ('Hanbo CHEN', '北京大学', '领域:计算机硬件技术', 'Board games for quantum computers'), ('Zhikang LUO', '北京大学', '领域:计算机硬件技术', 'Board games for quantum computers'), ('天津大学', None, None, 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('加州大学圣迭戈分校', None, None, 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('南通大学', None, None, 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Minpeng XU', '天津大学', '领域:生物学、基础医学、电信技术', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Feng He', '天津大学', '领域:生物学、基础医学、电信技术', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Tzyy-Ping Jung', '加州大学圣迭戈分校', '领域:生物医学工程、电信技术、神经病学', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('军事医学科学院毒物药...', None, None, 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('军事医学科学院', None, None, 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('北京天广实生物技术股...', None, None, 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('中国科学院力学研究所', None, None, 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Chunxia Qiao', '军事医学科学院毒物药物研究所', '领域:肿瘤学、基础医学、妇产科学', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Ming Lv', '军事医学科学院', '领域:肿瘤学、妇产科学、有机化工', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Xinying Li', '军事医学科学院', '领域:肿瘤学、妇产科学、有机化工', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method')] +2022-07-08 09:10:32.235 | INFO | dcs.tests.spider_task:compose_result:133 - [DATABASE] writing crawl results to database... +2022-07-08 09:10:32.235 | INFO | dcs.tools.database:write_results2database:203 - [DATABASE] writing 74st crawl results to table god_crawl_result in database... +2022-07-08 09:10:32.252 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 74st crawl results! +2022-07-08 09:10:32.441 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55613): {'crawl_id': 74, 'table_name': 'god_crawl_result', 'type': 'response'} +2022-07-08 09:10:32.442 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('127.0.0.1', 55613)! +2022-07-08 09:14:05.689 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:14:10.792 | INFO | dcs.server:run:25 - [SERVER] connected to client ('127.0.0.1', 55847) +2022-07-08 09:14:10.792 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('127.0.0.1', 55847)! +2022-07-08 09:14:11.754 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:14:11.754 | INFO | dcs.tests.spider_task:distribute_task:105 - [TASK] distributing task: (('127.0.0.1', 55847), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:14:11.754 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:14:11.754 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate remote task failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} is at state waiting... +2022-07-08 09:14:11.754 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} +2022-07-08 09:14:11.754 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:14:11.754 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate remote task failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} is at state waiting... +2022-07-08 09:14:11.754 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} +2022-07-08 09:14:11.754 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:14:12.762 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55847): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:14:16.762 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:14:17.108 | WARNING | dcs.tests.fastcrawler:parse_paper_html:118 - [PARSE] paper parser can not find authors info! +2022-07-08 09:14:17.611 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:17.626 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:17.673 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:17.925 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:17.940 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:17.956 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:17.956 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.254 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.302 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.317 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.333 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.333 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.364 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.458 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.458 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.474 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.506 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.521 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.757 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.913 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:18.960 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.086 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.212 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.243 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.369 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.432 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.511 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.526 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.542 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.558 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.573 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:19.621 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:20.062 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:20.156 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:20.493 | WARNING | dcs.tests.fastcrawler:parse_author_html:136 - [PARSE] author parser can not find personal info +2022-07-08 09:14:21.436 | INFO | dcs.tests.spider_task:run:63 - [TASK] local partial crawl task finished: (('127.0.0.1', 55847), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:14:21.736 | INFO | dcs.tests.spider_task:run:63 - [TASK] local partial crawl task finished: (('127.0.0.1', 55847), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'}) +2022-07-08 09:14:21.767 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:14:21.767 | INFO | dcs.tests.spider_task:compose_result:125 - [COMPOSE] composing task... +2022-07-08 09:14:21.767 | INFO | dcs.tests.spider_task:compose_result:132 - [RESULT] [('Chris Palmer', '', '领域:生物学、电信技术、生物医学工程', 'Brain-Computer Interface Speaks Up'), ('葛阳阳', '南京大学', '领域:物理学、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('王治昱', '南京大学', '领域:物理学、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('郑文', '南京大学', '领域:物理学、电力工业、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('Rui BIAN', '华中科技大学', '领域:生物学、电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Lubin MENG', '华中科技大学', '领域:生物学、电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Dongrui Wu', '之江实验室', '领域:电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Haochen HU', '北京理工大学', '领域:生物学、电信技术、生物医学工程', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Yue Liu', '北京电影学院', '领域:计算机软件及计算机应用、自动化技术、临床医学', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Kang YUE', '北京理工大学', '领域:生物学、电信技术、生物医学工程', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Biao WU', '北京大学', '领域:物理学、计算机硬件技术', 'Board games for quantum computers'), ('Hanbo CHEN', '北京大学', '领域:计算机硬件技术', 'Board games for quantum computers'), ('Zhikang LUO', '北京大学', '领域:计算机硬件技术', 'Board games for quantum computers'), ('Chunxia Qiao', '军事医学科学院毒物药物研究所', '领域:肿瘤学、基础医学、妇产科学', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Ming Lv', '军事医学科学院', '领域:肿瘤学、妇产科学、有机化工', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Xinying Li', '军事医学科学院', '领域:肿瘤学、妇产科学、有机化工', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Minpeng XU', '天津大学', '领域:生物学、基础医学、电信技术', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Feng He', '天津大学', '领域:生物学、基础医学、电信技术', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Tzyy-Ping Jung', '加州大学圣迭戈分校', '领域:生物医学工程、电信技术、神经病学', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('孔珍珍', '广东省碧桂园学校', '领域:中等教育', 'CAIE中Computer Science考试对信息技术纳入高考的启示'), ('李莉华', '东华大学', '领域:外国语言文字、中国语言文字、初等教育', 'Opening Moves Involved in Text-based Computer-Mediated-Communication (CMC) by Chinese Adults'), ('Zhang Lingxin', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Shen Junkai', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Zhu Baijie', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Jianhua Tao', '中国科学院大学', '领域:计算机软件及计算机应用、中国语言文字、电信技术', 'Emotion recognition for human-computer interaction'), ('Ren Noguchi', '高知大学', '领域:计算机软件及计算机应用、无线电电子学', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Kohei Suzuki', '高知大学', '领域:计算机软件及计算机应用、无线电电子学', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Yoshiki Moriguchi', '高知大学', '领域:无线电电子学、计算机软件及计算机应用', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Jingjing WANG', '中国科学院', '领域:生物学、燃料化工、石油天然气工业', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Wei Zhao', '中国科学院', '领域:无线电电子学、生物学、物理学', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Kunpeng Song', '中国科学院', '领域:燃料化工、石油天然气工业', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Liu bo', '北京市控制工程研究所', '领域:航空航天科学与工程、动力工程、电信技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('Yang Mengfei', '中国空间技术研究院', '领域:航空航天科学与工程、自动化技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('WANG Yong', '北京市控制工程研究所', '领域:航空航天科学与工程、数学、自动化技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('Yu Zhang', '哈尔滨工业大学', '领域:电信技术、生物学、计算机软件及计算机应用', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Huaqing Li', '哈尔滨工业大学', '领域:生物学、电信技术、自动化技术', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Heng Dong', '哈尔滨工业大学', '领域:生物学、电信技术、自动化技术', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Qinjun Qiu', '中国地质大学(武汉)', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Zhong Xie', '中国地质大学(武汉)', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Die Zhang', '武汉大学', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology')] +2022-07-08 09:14:21.783 | INFO | dcs.tests.spider_task:compose_result:133 - [DATABASE] writing crawl results to database... +2022-07-08 09:14:21.783 | INFO | dcs.tools.database:write_results2database:203 - [DATABASE] writing 75st crawl results to table god_crawl_result in database... +2022-07-08 09:14:21.799 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 75st crawl results! +2022-07-08 09:14:21.909 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 55847): {'crawl_id': 75, 'table_name': 'god_crawl_result', 'type': 'response'} +2022-07-08 09:14:21.909 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('127.0.0.1', 55847)! +2022-07-08 09:20:25.974 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:20:25.987 | ERROR | dcs.tools.database:mysql_conn:18 - [ERROR] (1130, "DESKTOP-3ASGFHD' is not allowed to connect to this MySQL server") +2022-07-08 09:20:25.987 | ERROR | dcs.tools.database:create_table:174 - [ERROR] 'NoneType' object has no attribute 'cursor' +2022-07-08 09:20:29.755 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:20:29.755 | ERROR | dcs.tools.database:mysql_conn:18 - [ERROR] (1130, "DESKTOP-3ASGFHD' is not allowed to connect to this MySQL server") +2022-07-08 09:20:29.755 | ERROR | dcs.tools.database:create_table:174 - [ERROR] 'NoneType' object has no attribute 'cursor' +2022-07-08 09:20:59.568 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:21:08.112 | INFO | dcs.server:run:25 - [SERVER] connected to client ('127.0.0.1', 56163) +2022-07-08 09:21:08.632 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:21:08.632 | INFO | dcs.tests.user_request_handler:register:35 - [REQUEST] register +2022-07-08 09:21:08.647 | INFO | dcs.tests.user_request_handler:register:42 - [RESPONSE] register: 用户名已存在,注册失败 +2022-07-08 09:21:09.639 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 56163): {'register': '用户名已存在,注册失败', 'type': 'register'} +2022-07-08 09:21:10.648 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:21:10.648 | INFO | dcs.tests.user_request_handler:login:25 - [REQUEST] login +2022-07-08 09:21:10.664 | INFO | dcs.tests.user_request_handler:login:32 - [RESPONSE] login: 9792254189ae55efb419a0846aaf8fa8a6dfbe69 +2022-07-08 09:21:11.657 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 56163): {'cookie': '9792254189ae55efb419a0846aaf8fa8a6dfbe69', 'type': 'login'} +2022-07-08 09:21:12.669 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:21:12.669 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:21:12.669 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 9792254189ae55efb419a0846aaf8fa8a6dfbe69 +2022-07-08 09:21:13.679 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 56163): {'report_free': 'success marked 9792254189ae55efb419a0846aaf8fa8a6dfbe69', 'type': 'report_free'} +2022-07-08 09:21:25.315 | INFO | dcs.server:run:25 - [SERVER] connected to client ('127.0.0.1', 56177) +2022-07-08 09:21:25.315 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('127.0.0.1', 56177)! +2022-07-08 09:21:25.789 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:21:25.789 | INFO | dcs.tests.spider_task:distribute_task:105 - [TASK] distributing task: (('127.0.0.1', 56177), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 5, 'cookie': 'god'}) +2022-07-08 09:21:25.789 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [['127.0.0.1', 9000]] +2022-07-08 09:21:25.789 | INFO | dcs.tests.spider_task:run:156 - [TASK] generating remote task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god'} +2022-07-08 09:21:25.789 | INFO | dcs.requester:run:59 - [REQUESTER] sending request {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 1, 'pages_end': 2, 'cookie': 'god', 'type': 'request'} to client ['127.0.0.1', 9000]... +2022-07-08 09:21:26.793 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 56177): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:21:26.793 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate remote task failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} is at state waiting... +2022-07-08 09:21:26.793 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'} +2022-07-08 09:21:26.793 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:21:26.793 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate remote task failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 3, 'pages_end': 4, 'cookie': 'god'} is at state waiting... +2022-07-08 09:21:26.793 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 3, 'pages_end': 4, 'cookie': 'god'} +2022-07-08 09:21:26.793 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:21:26.793 | WARNING | dcs.tests.spider_task:run:165 - [TASK] generate remote task failed, no free remote nodes! spider task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 4, 'pages_end': 5, 'cookie': 'god'} is at state waiting... +2022-07-08 09:21:26.793 | INFO | dcs.tests.spider_task:run:166 - [TASK] generating local task {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 4, 'pages_end': 5, 'cookie': 'god'} +2022-07-08 09:21:26.793 | INFO | dcs.tests.spider_task:crawl_zhiwang:27 - [CRAWLER] local crawler is starting... +2022-07-08 09:21:31.808 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [] +2022-07-08 09:21:31.950 | WARNING | dcs.tests.fastcrawler:parse_paper_html:118 - [PARSE] paper parser can not find authors info! +2022-07-08 09:21:31.965 | WARNING | dcs.tests.fastcrawler:parse_paper_html:118 - [PARSE] paper parser can not find authors info! +2022-07-08 09:21:34.539 | INFO | dcs.requester:run:66 - [REMOTE] receiving remote task result {'0': {'name': '孔珍珍', 'college': '广东省碧桂园学校', 'major': '领域:中等教育', 'title': 'CAIE中Computer Science考试对信息技术纳入高考的启示'}, '1': {'name': '李莉华', 'college': '东华大学', 'major': '领域:外国语言文字、中国语言文字、初等教育', 'title': 'Opening Moves Involved in Text-based Computer-Mediated-Communication (CMC) by Chinese Adults'}, '2': {'name': 'Zhang Lingxin', 'college': '中国地震局工程力学研究所', 'major': '领域:建筑科学与工程', 'title': 'A review of the research and application of deep learning-based computer vision in structural damage detection'}, '3': {'name': 'Shen Junkai', 'college': '中国地震局工程力学研究所', 'major': '领域:建筑科学与工程', 'title': 'A review of the research and application of deep learning-based computer vision in structural damage detection'}, '4': {'name': 'Zhu Baijie', 'college': '中国地震局工程力学研究所', 'major': '领域:建筑科学与工程', 'title': 'A review of the research and application of deep learning-based computer vision in structural damage detection'}, '5': {'name': 'Jianhua Tao', 'college': '中国科学院大学', 'major': '领域:计算机软件及计算机应用、中国语言文字、电信技术', 'title': 'Emotion recognition for human-computer interaction'}, '6': {'name': 'Ren Noguchi', 'college': '高知大学', 'major': '领域:计算机软件及计算机应用、无线电电子学', 'title': 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'}, '7': {'name': 'Kohei Suzuki', 'college': '高知大学', 'major': '领域:计算机软件及计算机应用、无线电电子学', 'title': 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'}, '8': {'name': 'Yoshiki Moriguchi', 'college': '高知大学', 'major': '领域:无线电电子学、计算机软件及计算机应用', 'title': 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'}, '9': {'name': 'Liu bo', 'college': '北京市控制工程研究所', 'major': '领域:航空航天科学与工程、动力工程、电信技术', 'title': 'A lightweight data-voting strategy for triple-modular redundant control computers'}, '10': {'name': 'Yang Mengfei', 'college': '中国空间技术研究院', 'major': '领域:航空航天科学与工程、自动化技术', 'title': 'A lightweight data-voting strategy for triple-modular redundant control computers'}, '11': {'name': 'WANG Yong', 'college': '北京市控制工程研究所', 'major': '领域:航空航天科学与工程、数学、自动化技术', 'title': 'A lightweight data-voting strategy for triple-modular redundant control computers'}, '12': {'name': 'Yu Zhang', 'college': '哈尔滨工业大学', 'major': '领域:电信技术、生物学、计算机软件及计算机应用', 'title': 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'}, '13': {'name': 'Huaqing Li', 'college': '哈尔滨工业大学', 'major': '领域:生物学、电信技术、自动化技术', 'title': 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'}, '14': {'name': 'Heng Dong', 'college': '哈尔滨工业大学', 'major': '领域:生物学、电信技术、自动化技术', 'title': 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'}, '15': {'name': 'Jingjing WANG', 'college': '中国科学院', 'major': '领域:生物学、燃料化工、石油天然气工业', 'title': 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'}, '16': {'name': 'Wei Zhao', 'college': '中国科学院', 'major': '领域:无线电电子学、生物学、物理学', 'title': 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'}, '17': {'name': 'Kunpeng Song', 'college': '中国科学院', 'major': '领域:燃料化工、石油天然气工业', 'title': 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'}, '18': {'name': 'Qinjun Qiu', 'college': '中国地质大学(武汉)', 'major': '领域:地质学、计算机软件及计算机应用', 'title': 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'}, '19': {'name': 'Zhong Xie', 'college': '中国地质大学(武汉)', 'major': '领域:地质学、计算机软件及计算机应用', 'title': 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'}, '20': {'name': 'Die Zhang', 'college': '武汉大学', 'major': '领域:地质学、计算机软件及计算机应用', 'title': 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'}} from ['127.0.0.1', 9000], saving... +2022-07-08 09:21:35.026 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:21:35.167 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:21:35.214 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 9792254189ae55efb419a0846aaf8fa8a6dfbe69 +2022-07-08 09:21:36.133 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 56163): {'report_free': 'success marked 9792254189ae55efb419a0846aaf8fa8a6dfbe69', 'type': 'report_free'} +2022-07-08 09:21:36.810 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [['127.0.0.1', 9000]] +2022-07-08 09:21:36.935 | INFO | dcs.tests.spider_task:run:63 - [TASK] local partial crawl task finished: (('127.0.0.1', 56177), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 4, 'pages_end': 5, 'cookie': 'god'}) +2022-07-08 09:21:37.391 | INFO | dcs.tests.spider_task:run:63 - [TASK] local partial crawl task finished: (('127.0.0.1', 56177), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 3, 'pages_end': 4, 'cookie': 'god'}) +2022-07-08 09:21:37.470 | INFO | dcs.tests.spider_task:run:63 - [TASK] local partial crawl task finished: (('127.0.0.1', 56177), {'action': 'crawl zhiwang', 'word': 'computer', 'pages_start': 2, 'pages_end': 3, 'cookie': 'god'}) +2022-07-08 09:21:41.820 | INFO | dcs.tests.spider_task:run:147 - [REMOTE] free nodes: [['127.0.0.1', 9000]] +2022-07-08 09:21:41.820 | INFO | dcs.tests.spider_task:compose_result:125 - [COMPOSE] composing task... +2022-07-08 09:21:41.820 | INFO | dcs.tests.spider_task:compose_result:132 - [RESULT] [('张俊杰', '天津职业技术师范大学', '领域:外国语言文字、教育理论与教育管理、计算机软件及计算机应用', "Incorporating Technology into English Language Learners' Classroom——A Case Study of Using Wiki, Podcast, and Computer Graphic Organizer as Tools"), ('Alex J.C.Witsil', 'Boise州立大学', '领域:地质学、地球物理学', 'Volcano video data characterized and classified using computer vision and machine learning algorithms'), ('Jeffrey B.Johnson', 'Boise州立大学', '领域:地质学、地球物理学', 'Volcano video data characterized and classified using computer vision and machine learning algorithms'), ('Chengyu Li', '中国科学院上海神经科学研究所', '领域:生物学、基础医学、电信技术', 'Progress in the brain–computer interface: an interview with Bin He'), ('Weijie Zhao', '', '领域:生物学、电信技术、生物医学工程', 'Progress in the brain–computer interface: an interview with Bin He'), ('Feng Wang', '山西医科大学第一医院', '领域:外科学', 'Application of computer tomography-based 3D reconstruction technique in hernia repair surgery'), ('Xiao-feng Yang', '山西医科大学第一医院', '领域:外科学', 'Application of computer tomography-based 3D reconstruction technique in hernia repair surgery'), ('Amos Lal', '美国MayoClinic医院', '领域:呼吸系统疾病、心血管系统疾病、自动化技术', 'Artificial intelligence and computer simulation models in critical illness'), ('Yuliya Pinevich', '美国MayoClinic医院', '领域:自动化技术、生物医学工程', 'Artificial intelligence and computer simulation models in critical illness'), ('Ognjen Gajic', '美国MayoClinic医院', '领域:呼吸系统疾病、临床医学、自动化技术', 'Artificial intelligence and computer simulation models in critical illness'), ('石安琪', '武汉大学', '领域:计算机硬件技术、化学', 'Long-Range Interaction Enhanced Adiabatic Quantum Computers'), ('关浩宇', '武汉大学', '领域:物理学、计算机硬件技术', 'Long-Range Interaction Enhanced Adiabatic Quantum Computers'), ('张军', '武汉大学', '领域:物理学、计算机硬件技术', 'Long-Range Interaction Enhanced Adiabatic Quantum Computers'), ('Tong Yu', '吉林大学第二医院', '领域:外科学', 'Computer navigation-assisted minimally invasive percutaneous screw placement for pelvic fractures'), ('Xue-Liang Cheng', '吉林大学第二医院', '领域:外科学', 'Computer navigation-assisted minimally invasive percutaneous screw placement for pelvic fractures'), ('Yang Qu', '吉林大学第二医院', '领域:外科学', 'Computer navigation-assisted minimally invasive percutaneous screw placement for pelvic fractures'), ('Lei Li', '河南工业大学', '领域:轻工业手工业、计算机软件及计算机应用', 'Computer vision-based method for monitoring grain quantity change in warehouses'), ('Xuan Fei', '河南工业大学', '领域:计算机软件及计算机应用、轻工业手工业', 'Computer vision-based method for monitoring grain quantity change in warehouses'), ('Zhuoli Dong', '河南工业大学', '领域:计算机软件及计算机应用、轻工业手工业', 'Computer vision-based method for monitoring grain quantity change in warehouses'), ('山蕊', '西安邮电大学', '领域:计算机硬件技术、电信技术、计算机软件及计算机应用', 'Design of a clustered data-driven array processor for computer vision'), ('Deng Junyong', '西安邮电大学', '领域:计算机硬件技术、电信技术、计算机软件及计算机应用', 'Design of a clustered data-driven array processor for computer vision'), ('Jiang Lin', '西安科技大学', '领域:计算机硬件技术、电信技术、工业通用技术及设备', 'Design of a clustered data-driven array processor for computer vision'), ('Arnab Rakshit', '印度Jadavpur大学', '领域:生物学、电信技术、生物医学工程', 'A Hybrid Brain-Computer Interface for ClosedLoop Position Control of a Robot Arm'), ('Amit Konar', '印度Jadavpur大学', '领域:电信技术、生物学、自动化技术', 'A Hybrid Brain-Computer Interface for ClosedLoop Position Control of a Robot Arm'), ('Atulya K.Nagar', 'Liverpool Hope University', '领域:生物学、电信技术、计算机软件及计算机应用', 'A Hybrid Brain-Computer Interface for ClosedLoop Position Control of a Robot Arm'), ('章晓君', '杭州大学', '领域:计算机软件及计算机应用、中国语言文字', "A Brief Analysis of the Translator's Subjectivity in the Process of Computer Aided Translation"), ('Jin-Qiong Zhou', '首都医科大学附属北京同仁医院', '领域:眼科与耳鼻咽喉科', 'Retinal vascular diameter changes assessed with a computer-assisted software after strabismus surgery'), ('Jing FU', '首都医科大学附属北京同仁医院', '领域:眼科与耳鼻咽喉科', 'Retinal vascular diameter changes assessed with a computer-assisted software after strabismus surgery'), ('Ji-Peng Li', '首都医科大学附属北京同仁医院', '领域:眼科与耳鼻咽喉科', 'Retinal vascular diameter changes assessed with a computer-assisted software after strabismus surgery'), ('Md Morshedul Alam', 'Louisville大学', '领域:计算机软件及计算机应用、电力工业', 'Automatic Assessment and Prediction of the Resilience of Utility Poles Using Unmanned Aerial Vehicles and Computer Vision Techniques'), ('Zanbo Zhu', '美国拉玛尔大学', '领域:计算机软件及计算机应用、电力工业', 'Automatic Assessment and Prediction of the Resilience of Utility Poles Using Unmanned Aerial Vehicles and Computer Vision Techniques'), ('Berna Eren Tokgoz', '美国拉玛尔大学', '领域:电力工业、计算机软件及计算机应用', 'Automatic Assessment and Prediction of the Resilience of Utility Poles Using Unmanned Aerial Vehicles and Computer Vision Techniques'), ('Hui-Qun Wu', '南通大学', '领域:眼科与耳鼻咽喉科、内分泌腺及全身性疾病、神经病学', 'Computer aided diabetic retinopathy detection based on ophthalmic photography: a systematic review and Meta-analysis'), ('Yan-Xing Shan', '南通大学', '领域:内分泌腺及全身性疾病、眼科与耳鼻咽喉科', 'Computer aided diabetic retinopathy detection based on ophthalmic photography: a systematic review and Meta-analysis'), ('Huan Wu', '南通大学', '领域:眼科与耳鼻咽喉科、神经病学、内分泌腺及全身性疾病', 'Computer aided diabetic retinopathy detection based on ophthalmic photography: a systematic review and Meta-analysis'), ('GAO Yongqiang', '南京航空航天大学', '领域:计算机软件及计算机应用', 'Vision-Based Hand Gesture Recognition for Human-Computer Interaction——A Survey'), ('Lu XIONG', '南京航空航天大学', '领域:计算机软件及计算机应用', 'Vision-Based Hand Gesture Recognition for Human-Computer Interaction——A Survey'), ('SUN Junbin', '南京航空航天大学', '领域:计算机软件及计算机应用', 'Vision-Based Hand Gesture Recognition for Human-Computer Interaction——A Survey'), ('Wen-Bin Zhong', 'Huddersfield大学', '领域:自动化技术、金属学及金属工艺', 'Toolpath Interpolation and Smoothing for Computer Numerical Control Machining of Freeform Surfaces: A Review'), ('Xi-Chun Luo', 'Strathclyde大学', '领域:自动化技术、金属学及金属工艺', 'Toolpath Interpolation and Smoothing for Computer Numerical Control Machining of Freeform Surfaces: A Review'), ('Wen-Long Chang', 'Strathclyde大学', '领域:自动化技术、金属学及金属工艺', 'Toolpath Interpolation and Smoothing for Computer Numerical Control Machining of Freeform Surfaces: A Review'), ('WANG Juhan', '北京交通大学', '领域:铁路运输', 'The FMEDA Based DC Calculation for Railway Safety Computer'), ('GAO Ying', '中国铁道科学研究院', '领域:铁路运输', 'The FMEDA Based DC Calculation for Railway Safety Computer'), ('CAO Yuan', '北京交通大学', '领域:铁路运输、自动化技术、电信技术', 'The FMEDA Based DC Calculation for Railway Safety Computer'), ('XIANG BAI', '华中科技大学', '领域:计算机软件及计算机应用、自动化技术、外国语言文字', 'Special focus on deep learning for computer vision'), ('Yanwei Pang', '天津大学', '领域:计算机软件及计算机应用、自动化技术', 'Special focus on deep learning for computer vision'), ('Guofeng Zhang', '浙江大学', '领域:计算机软件及计算机应用、自动化技术、电信技术', 'Special focus on deep learning for computer vision'), ('Chris Palmer', '', '领域:生物学、电信技术、生物医学工程', 'Brain-Computer Interface Speaks Up'), ('葛阳阳', '南京大学', '领域:物理学、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('王治昱', '南京大学', '领域:物理学、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('郑文', '南京大学', '领域:物理学、电力工业、计算机硬件技术', 'Optimized quantum singular value thresholding algorithm based on a hybrid quantum computer'), ('Rui BIAN', '华中科技大学', '领域:生物学、电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Lubin MENG', '华中科技大学', '领域:生物学、电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Dongrui Wu', '之江实验室', '领域:电信技术、生物医学工程', 'SSVEP-based brain-computer interfaces are vulnerable to square wave attacks'), ('Haochen HU', '北京理工大学', '领域:生物学、电信技术、生物医学工程', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Yue Liu', '北京电影学院', '领域:计算机软件及计算机应用、自动化技术、临床医学', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Kang YUE', '北京理工大学', '领域:生物学、电信技术、生物医学工程', 'Navigation in virtual and real environment using brain computer interface: a progress report'), ('Biao WU', '北京大学', '领域:物理学、计算机硬件技术', 'Board games for quantum computers'), ('Hanbo CHEN', '北京大学', '领域:计算机硬件技术', 'Board games for quantum computers'), ('Zhikang LUO', '北京大学', '领域:计算机硬件技术', 'Board games for quantum computers'), ('Minpeng XU', '天津大学', '领域:生物学、基础医学、电信技术', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Feng He', '天津大学', '领域:生物学、基础医学、电信技术', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Tzyy-Ping Jung', '加州大学圣迭戈分校', '领域:生物医学工程、电信技术、神经病学', 'Current Challenges for the Practical Application of Electroencephalography-Based Brain-Computer Interfaces'), ('Chunxia Qiao', '军事医学科学院毒物药物研究所', '领域:肿瘤学、基础医学、妇产科学', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Ming Lv', '军事医学科学院', '领域:肿瘤学、妇产科学、有机化工', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('Xinying Li', '军事医学科学院', '领域:肿瘤学、妇产科学、有机化工', 'A Novel Human Antibody, HF, against HER2/erb-B2 Obtained by a Computer-Aided Antibody Design Method'), ('孔珍珍', '广东省碧桂园学校', '领域:中等教育', 'CAIE中Computer Science考试对信息技术纳入高考的启示'), ('李莉华', '东华大学', '领域:外国语言文字、中国语言文字、初等教育', 'Opening Moves Involved in Text-based Computer-Mediated-Communication (CMC) by Chinese Adults'), ('Zhang Lingxin', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Shen Junkai', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Zhu Baijie', '中国地震局工程力学研究所', '领域:建筑科学与工程', 'A review of the research and application of deep learning-based computer vision in structural damage detection'), ('Jianhua Tao', '中国科学院大学', '领域:计算机软件及计算机应用、中国语言文字、电信技术', 'Emotion recognition for human-computer interaction'), ('Ren Noguchi', '高知大学', '领域:计算机软件及计算机应用、无线电电子学', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Kohei Suzuki', '高知大学', '领域:计算机软件及计算机应用、无线电电子学', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Yoshiki Moriguchi', '高知大学', '领域:无线电电子学、计算机软件及计算机应用', 'Real-time gradation-expressible amplitude-modulationtype electroholography based on binary-weighted computer-generated hologram'), ('Liu bo', '北京市控制工程研究所', '领域:航空航天科学与工程、动力工程、电信技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('Yang Mengfei', '中国空间技术研究院', '领域:航空航天科学与工程、自动化技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('WANG Yong', '北京市控制工程研究所', '领域:航空航天科学与工程、数学、自动化技术', 'A lightweight data-voting strategy for triple-modular redundant control computers'), ('Yu Zhang', '哈尔滨工业大学', '领域:电信技术、生物学、计算机软件及计算机应用', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Huaqing Li', '哈尔滨工业大学', '领域:生物学、电信技术、自动化技术', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Heng Dong', '哈尔滨工业大学', '领域:生物学、电信技术、自动化技术', 'Transfer Learning Algorithm Design for Feature Transfer Problem in Motor Imagery Brain-computer Interface'), ('Jingjing WANG', '中国科学院', '领域:生物学、燃料化工、石油天然气工业', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Wei Zhao', '中国科学院', '领域:无线电电子学、生物学、物理学', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Kunpeng Song', '中国科学院', '领域:燃料化工、石油天然气工业', 'Computer generation of detailed reaction networks in hydrocracking of Fischer-Tropsch wax'), ('Qinjun Qiu', '中国地质大学(武汉)', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Zhong Xie', '中国地质大学(武汉)', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology'), ('Die Zhang', '武汉大学', '领域:地质学、计算机软件及计算机应用', 'Knowledge graph for identifying geological disasters by integrating computer vision with ontology')] +2022-07-08 09:21:41.835 | INFO | dcs.tests.spider_task:compose_result:133 - [DATABASE] writing crawl results to database... +2022-07-08 09:21:41.835 | INFO | dcs.tools.database:write_results2database:203 - [DATABASE] writing 76st crawl results to table god_crawl_result in database... +2022-07-08 09:21:41.851 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 76st crawl results! +2022-07-08 09:21:42.199 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('127.0.0.1', 56177): {'crawl_id': 76, 'table_name': 'god_crawl_result', 'type': 'response'} +2022-07-08 09:21:42.199 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('127.0.0.1', 56177)! +2022-07-08 09:22:52.498 | INFO | __main__::14 - [SERVER] reading config args... +2022-07-08 09:23:41.959 | INFO | dcs.server:run:25 - [SERVER] connected to client ('192.168.43.241', 56447) +2022-07-08 09:23:41.959 | INFO | dcs.server:run:25 - [SERVER] connected to client ('192.168.43.241', 56448) +2022-07-08 09:23:41.959 | INFO | dcs.server:run:25 - [SERVER] connected to client ('192.168.43.241', 56449) +2022-07-08 09:23:42.430 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:23:42.430 | INFO | dcs.tests.user_request_handler:register:35 - [REQUEST] register +2022-07-08 09:23:42.430 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:23:42.430 | INFO | dcs.tests.user_request_handler:register:35 - [REQUEST] register +2022-07-08 09:23:42.620 | INFO | dcs.tests.user_request_handler:register:42 - [RESPONSE] register: 注册成功 +2022-07-08 09:23:42.635 | INFO | dcs.tests.user_request_handler:register:42 - [RESPONSE] register: 注册成功 +2022-07-08 09:23:43.439 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:23:43.439 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56447): {'register': '注册成功', 'type': 'register'} +2022-07-08 09:23:43.439 | INFO | dcs.tests.user_request_handler:register:35 - [REQUEST] register +2022-07-08 09:23:43.644 | INFO | dcs.tests.user_request_handler:register:42 - [RESPONSE] register: 注册成功 +2022-07-08 09:23:44.449 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:23:44.449 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56449): {'register': '注册成功', 'type': 'register'} +2022-07-08 09:23:44.449 | INFO | dcs.tests.user_request_handler:login:25 - [REQUEST] login +2022-07-08 09:23:44.622 | INFO | dcs.tests.user_request_handler:login:32 - [RESPONSE] login: 0a8d4080b221cae9b4ac824c20bff322d237b91b +2022-07-08 09:23:45.455 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:23:45.455 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56448): {'register': '注册成功', 'type': 'register'} +2022-07-08 09:23:45.455 | INFO | dcs.tests.user_request_handler:login:25 - [REQUEST] login +2022-07-08 09:23:45.691 | INFO | dcs.tests.user_request_handler:login:32 - [RESPONSE] login: 62630b238efeddc07694a7def5884fba8fb7cc29 +2022-07-08 09:23:46.466 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56447): {'cookie': '0a8d4080b221cae9b4ac824c20bff322d237b91b', 'type': 'login'} +2022-07-08 09:23:46.466 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:23:46.466 | INFO | dcs.tests.user_request_handler:login:25 - [REQUEST] login +2022-07-08 09:23:46.861 | INFO | dcs.tests.user_request_handler:login:32 - [RESPONSE] login: 73574248c657f81270205fcae7a7a839dd9d3500 +2022-07-08 09:23:47.476 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56449): {'cookie': '62630b238efeddc07694a7def5884fba8fb7cc29', 'type': 'login'} +2022-07-08 09:23:47.476 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:23:47.476 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:23:47.476 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 0a8d4080b221cae9b4ac824c20bff322d237b91b +2022-07-08 09:23:48.480 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:23:48.480 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56448): {'cookie': '73574248c657f81270205fcae7a7a839dd9d3500', 'type': 'login'} +2022-07-08 09:23:48.480 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:23:48.480 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 62630b238efeddc07694a7def5884fba8fb7cc29 +2022-07-08 09:23:49.489 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:23:49.489 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56447): {'report_free': 'success marked 0a8d4080b221cae9b4ac824c20bff322d237b91b', 'type': 'report_free'} +2022-07-08 09:23:49.489 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:23:49.489 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 73574248c657f81270205fcae7a7a839dd9d3500 +2022-07-08 09:23:50.497 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56449): {'report_free': 'success marked 62630b238efeddc07694a7def5884fba8fb7cc29', 'type': 'report_free'} +2022-07-08 09:23:51.506 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56448): {'report_free': 'success marked 73574248c657f81270205fcae7a7a839dd9d3500', 'type': 'report_free'} +2022-07-08 09:24:17.515 | INFO | dcs.server:run:25 - [SERVER] connected to client ('192.168.43.64', 59915) +2022-07-08 09:24:17.531 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('192.168.43.64', 59915)! +2022-07-08 09:24:17.768 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:24:17.768 | INFO | dcs.tests.user_request_handler:register:35 - [REQUEST] register +2022-07-08 09:24:18.068 | INFO | dcs.tests.user_request_handler:register:42 - [RESPONSE] register: 注册成功 +2022-07-08 09:24:18.771 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 59915): {'register': '注册成功', 'type': 'register'} +2022-07-08 09:24:38.474 | INFO | dcs.server:run:25 - [SERVER] connected to client ('192.168.43.64', 59925) +2022-07-08 09:24:38.474 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('192.168.43.64', 59925)! +2022-07-08 09:24:38.992 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:24:38.992 | INFO | dcs.tests.user_request_handler:login:25 - [REQUEST] login +2022-07-08 09:24:39.261 | INFO | dcs.tests.user_request_handler:login:32 - [RESPONSE] login: 539e1a005fd291e79c85d2698ce4314960c562bb +2022-07-08 09:24:40.019 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 59925): {'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb', 'type': 'login'} +2022-07-08 09:24:40.019 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('192.168.43.64', 59925)! +2022-07-08 09:25:04.300 | INFO | dcs.server:run:25 - [SERVER] connected to client ('192.168.43.64', 59939) +2022-07-08 09:25:04.300 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('192.168.43.64', 59939)! +2022-07-08 09:25:04.426 | ERROR | dcs.tools.database:get_last_crawl_id:132 - [ERROR] (1146, "Table 'test.wfy_crawl_result' doesn't exist") +2022-07-08 09:25:05.228 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:25:05.228 | INFO | dcs.tests.spider_task:distribute_task:104 - [TASK] distributing task: (('192.168.43.64', 59939), {'action': 'crawl zhiwang', 'word': '生命科学', 'pages_start': 1, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'}) +2022-07-08 09:25:05.228 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9000], ['192.168.43.241', 9001], ['192.168.43.241', 9002]] +2022-07-08 09:25:05.228 | INFO | dcs.tests.spider_task:run:155 - [TASK] generating remote task {'action': 'crawl zhiwang', 'word': '生命科学', 'pages_start': 1, 'pages_end': 2, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'} +2022-07-08 09:25:05.228 | INFO | dcs.requester:run:59 - [REQUESTER] sending request {'action': 'crawl zhiwang', 'word': '生命科学', 'pages_start': 1, 'pages_end': 2, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb', 'type': 'request'} to client ['192.168.43.241', 9000]... +2022-07-08 09:25:05.306 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 59939): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:25:06.230 | INFO | dcs.tests.spider_task:run:155 - [TASK] generating remote task {'action': 'crawl zhiwang', 'word': '生命科学', 'pages_start': 2, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'} +2022-07-08 09:25:06.230 | INFO | dcs.requester:run:59 - [REQUESTER] sending request {'action': 'crawl zhiwang', 'word': '生命科学', 'pages_start': 2, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb', 'type': 'request'} to client ['192.168.43.241', 9001]... +2022-07-08 09:25:12.240 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9002]] +2022-07-08 09:25:12.966 | INFO | dcs.requester:run:66 - [REMOTE] receiving remote task result {'0': {'name': '赵润州', 'college': '军事医学科学院', 'major': '领域:特种医学、军事医学与卫生、自动化技术', 'title': '从美国博德研究所成功之道看生命科学前沿创新'}, '1': {'name': '刘术', 'college': '军事医学科学院', 'major': '领域:特种医学、军事医学与卫生、军事', 'title': '从美国博德研究所成功之道看生命科学前沿创新'}, '2': {'name': '房媛', 'college': '陕西服装工程学院', 'major': '领域:有机化工、高等教育、化学', 'title': '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'}, '3': {'name': '董林娟', 'college': '陕西服装工程学院', 'major': '领域:中药学、高等教育、医学教育与医学边缘学科', 'title': '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'}, '4': {'name': '石钰', 'college': '陕西服装工程学院', 'major': '领域:高等教育、医学教育与医学边缘学科、中药学', 'title': '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'}, '5': {'name': '田艳艳', 'college': '国家自然科学基金委员会生命科学部', 'major': '领域:生物学、基础医学、医学教育与医学边缘学科', 'title': '2021年度生命科学部基金项目评审工作综述'}, '6': {'name': '赵海铭', 'college': '国家自然科学基金委员会生命科学部', 'major': '领域:生物学、化学、有机化工', 'title': '2021年度生命科学部基金项目评审工作综述'}, '7': {'name': '朱孟娟', 'college': '国家自然科学基金委员会生命科学部', 'major': '领域:自然科学理论与方法', 'title': '2021年度生命科学部基金项目评审工作综述'}, '8': {'name': '李亮', 'college': '河北师范大学汇华学院', 'major': '领域:中等教育、高等教育、人口学与计划生育', 'title': '基于重大疫情防控体制建设要求的中小学生命科学教育研究'}, '9': {'name': '段婷娟', 'college': '', 'major': '领域:中等教育', 'title': '基于重大疫情防控体制建设要求的中小学生命科学教育研究'}, '10': {'name': '穆旭同', 'college': '', 'major': '领域:中等教育', 'title': '基于重大疫情防控体制建设要求的中小学生命科学教育研究'}, '11': {'name': '房媛', 'college': '陕西服装工程学院', 'major': '领域:有机化工、高等教育、化学', 'title': '生命科学概论课程思政教学中结合茶文化的创新策略'}, '12': {'name': '董林娟', 'college': '陕西服装工程学院', 'major': '领域:中药学、高等教育、医学教育与医学边缘学科', 'title': '生命科学概论课程思政教学中结合茶文化的创新策略'}, '13': {'name': '石钰', 'college': '陕西服装工程学院', 'major': '领域:高等教育、医学教育与医学边缘学科、中药学', 'title': '生命科学概论课程思政教学中结合茶文化的创新策略'}} from ['192.168.43.241', 9000], saving... +2022-07-08 09:25:13.312 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:25:13.312 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:25:13.312 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 62630b238efeddc07694a7def5884fba8fb7cc29 +2022-07-08 09:25:13.359 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56449): {'report_free': 'success marked 62630b238efeddc07694a7def5884fba8fb7cc29', 'type': 'report_free'} +2022-07-08 09:25:13.706 | INFO | dcs.requester:run:66 - [REMOTE] receiving remote task result {'0': {'name': '罗梓超', 'college': '北京市科学技术情报研究所', 'major': '领域:信息经济与邮政经济、工业经济、科学研究管理', 'title': '中美生命科学科研现状对比研究'}, '1': {'name': '李荣', 'college': '北京市科学技术情报研究所', 'major': '领域:图书情报与数字图书馆、科学研究管理、工业经济', 'title': '中美生命科学科研现状对比研究'}, '2': {'name': '董晓晴', 'college': '北京市科学技术情报研究所', 'major': '领域:科学研究管理、图书情报与数字图书馆、互联网技术', 'title': '中美生命科学科研现状对比研究'}, '3': {'name': '杨淑萍', 'college': '石河子大学', 'major': '领域:生物学、中等教育、初等教育', 'title': '中美小学科学课程标准“生命科学领域”内容的比较研究'}, '4': {'name': '郝渊博', 'college': '石河子大学', 'major': '领域:初等教育、中等教育', 'title': '中美小学科学课程标准“生命科学领域”内容的比较研究'}, '5': {'name': '金冬桂', 'college': '石河子大学', 'major': '领域:中等教育、初等教育', 'title': '中美小学科学课程标准“生命科学领域”内容的比较研究'}, '6': {'name': '王郅媛', 'college': '北京市科学仪器装备协作服务中心', 'major': '领域:轻工业手工业、园艺、生物学', 'title': '生命科学仪器现状及北京支持方向建议'}, '7': {'name': '杨鹏宇', 'college': '北京市科学仪器装备协作服务中心', 'major': '领域:仪器仪表工业、建筑科学与工程、矿业工程', 'title': '生命科学仪器现状及北京支持方向建议'}, '8': {'name': '解静', 'college': '北京市科学仪器装备协作服务中心', 'major': '领域:工业经济、仪器仪表工业、矿业工程', 'title': '生命科学仪器现状及北京支持方向建议'}} from ['192.168.43.241', 9001], saving... +2022-07-08 09:25:14.328 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:25:14.328 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:25:14.328 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 73574248c657f81270205fcae7a7a839dd9d3500 +2022-07-08 09:25:14.376 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56448): {'report_free': 'success marked 73574248c657f81270205fcae7a7a839dd9d3500', 'type': 'report_free'} +2022-07-08 09:25:17.245 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9001], ['192.168.43.241', 9000], ['192.168.43.241', 9002]] +2022-07-08 09:25:17.245 | INFO | dcs.tests.spider_task:compose_result:124 - [COMPOSE] composing task... +2022-07-08 09:25:17.498 | INFO | dcs.tests.spider_task:compose_result:131 - [RESULT] [('赵润州', '军事医学科学院', '领域:特种医学、军事医学与卫生、自动化技术', '从美国博德研究所成功之道看生命科学前沿创新'), ('刘术', '军事医学科学院', '领域:特种医学、军事医学与卫生、军事', '从美国博德研究所成功之道看生命科学前沿创新'), ('房媛', '陕西服装工程学院', '领域:有机化工、高等教育、化学', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('董林娟', '陕西服装工程学院', '领域:中药学、高等教育、医学教育与医学边缘学科', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('石钰', '陕西服装工程学院', '领域:高等教育、医学教育与医学边缘学科、中药学', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('田艳艳', '国家自然科学基金委员会生命科学部', '领域:生物学、基础医学、医学教育与医学边缘学科', '2021年度生命科学部基金项目评审工作综述'), ('赵海铭', '国家自然科学基金委员会生命科学部', '领域:生物学、化学、有机化工', '2021年度生命科学部基金项目评审工作综述'), ('朱孟娟', '国家自然科学基金委员会生命科学部', '领域:自然科学理论与方法', '2021年度生命科学部基金项目评审工作综述'), ('李亮', '河北师范大学汇华学院', '领域:中等教育、高等教育、人口学与计划生育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('段婷娟', '', '领域:中等教育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('穆旭同', '', '领域:中等教育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('房媛', '陕西服装工程学院', '领域:有机化工、高等教育、化学', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('董林娟', '陕西服装工程学院', '领域:中药学、高等教育、医学教育与医学边缘学科', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('石钰', '陕西服装工程学院', '领域:高等教育、医学教育与医学边缘学科、中药学', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('罗梓超', '北京市科学技术情报研究所', '领域:信息经济与邮政经济、工业经济、科学研究管理', '中美生命科学科研现状对比研究'), ('李荣', '北京市科学技术情报研究所', '领域:图书情报与数字图书馆、科学研究管理、工业经济', '中美生命科学科研现状对比研究'), ('董晓晴', '北京市科学技术情报研究所', '领域:科学研究管理、图书情报与数字图书馆、互联网技术', '中美生命科学科研现状对比研究'), ('杨淑萍', '石河子大学', '领域:生物学、中等教育、初等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('郝渊博', '石河子大学', '领域:初等教育、中等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('金冬桂', '石河子大学', '领域:中等教育、初等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('王郅媛', '北京市科学仪器装备协作服务中心', '领域:轻工业手工业、园艺、生物学', '生命科学仪器现状及北京支持方向建议'), ('杨鹏宇', '北京市科学仪器装备协作服务中心', '领域:仪器仪表工业、建筑科学与工程、矿业工程', '生命科学仪器现状及北京支持方向建议'), ('解静', '北京市科学仪器装备协作服务中心', '领域:工业经济、仪器仪表工业、矿业工程', '生命科学仪器现状及北京支持方向建议')] +2022-07-08 09:25:17.498 | INFO | dcs.tests.spider_task:compose_result:132 - [DATABASE] writing crawl results to database... +2022-07-08 09:25:17.513 | INFO | dcs.tools.database:write_results2database:203 - [DATABASE] writing 1st crawl results to table wfy_crawl_result in database... +2022-07-08 09:25:18.140 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 1st crawl results! +2022-07-08 09:25:18.410 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 59939): {'crawl_id': 1, 'table_name': 'wfy_crawl_result', 'type': 'response'} +2022-07-08 09:25:18.571 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('192.168.43.64', 59939)! +2022-07-08 09:26:30.319 | INFO | dcs.server:run:25 - [SERVER] connected to client ('192.168.43.64', 59962) +2022-07-08 09:26:30.319 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('192.168.43.64', 59962)! +2022-07-08 09:26:30.966 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:26:30.966 | INFO | dcs.tests.spider_task:distribute_task:104 - [TASK] distributing task: (('192.168.43.64', 59962), {'action': 'crawl zhiwang', 'word': '生物', 'pages_start': 1, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'}) +2022-07-08 09:26:30.966 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9002], ['192.168.43.241', 9000], ['192.168.43.241', 9001]] +2022-07-08 09:26:30.966 | INFO | dcs.tests.spider_task:run:155 - [TASK] generating remote task {'action': 'crawl zhiwang', 'word': '生物', 'pages_start': 1, 'pages_end': 2, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'} +2022-07-08 09:26:30.966 | INFO | dcs.requester:run:59 - [REQUESTER] sending request {'action': 'crawl zhiwang', 'word': '生物', 'pages_start': 1, 'pages_end': 2, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb', 'type': 'request'} to client ['192.168.43.241', 9002]... +2022-07-08 09:26:31.044 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 59962): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:26:31.974 | INFO | dcs.tests.spider_task:run:155 - [TASK] generating remote task {'action': 'crawl zhiwang', 'word': '生物', 'pages_start': 2, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'} +2022-07-08 09:26:31.974 | INFO | dcs.requester:run:59 - [REQUESTER] sending request {'action': 'crawl zhiwang', 'word': '生物', 'pages_start': 2, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb', 'type': 'request'} to client ['192.168.43.241', 9000]... +2022-07-08 09:26:37.993 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9001]] +2022-07-08 09:26:39.943 | INFO | dcs.requester:run:66 - [REMOTE] receiving remote task result {'0': {'name': '覃香香', 'college': '广西壮族自治区中国科学院广西植物研究所', 'major': '领域:轻工业手工业、有机化工、一般化学工业', 'title': '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'}, '1': {'name': '周玉恒', 'college': '中国科学院广西植物研究所', 'major': '领域:轻工业手工业、有机化工、化学', 'title': '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'}, '2': {'name': '陈海珊', 'college': '中国科学院广西植物研究所', 'major': '领域:有机化工、轻工业手工业、植物保护', 'title': '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'}, '3': {'name': '李亚红', 'college': '天津市海水淡化与综合利用研究所', 'major': '领域:环境科学与资源利用、海洋学、无机化工', 'title': '聚合物类阻垢剂在海水中的可生物降解性'}, '4': {'name': '赵小芳', 'college': '国家海洋局天津海水淡化与综合利用研究所', 'major': '领域:环境科学与资源利用、海洋学、无机化工', 'title': '聚合物类阻垢剂在海水中的可生物降解性'}, '5': {'name': '周筝', 'college': '天津市海水淡化与综合利用研究所', 'major': '领域:环境科学与资源利用、海洋学、无机化工', 'title': '聚合物类阻垢剂在海水中的可生物降解性'}, '6': {'name': '何义', 'college': '桂林医学院', 'major': '领域:医学教育与医学边缘学科、药学、高等教育', 'title': '病原微生物实验室生物安全管理探讨'}, '7': {'name': '吴丹', 'college': '桂林医学院', 'major': '领域:畜牧与动物医学、药学、医学教育与医学边缘学科', 'title': '病原微生物实验室生物安全管理探讨'}, '8': {'name': '蒋莲秀', 'college': '桂林医学院', 'major': '领域:药学、农业基础科学、医学教育与医学边缘学科', 'title': '病原微生物实验室生物安全管理探讨'}, '9': {'name': '高尚志', 'college': '吉林农业大学', 'major': '领域:农业基础科学、农艺学', 'title': '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'}, '10': {'name': '刘日月', 'college': '吉林农业大学', 'major': '领域:农业基础科学、农艺学、中药学', 'title': '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'}, '11': {'name': '窦森', 'college': '吉林农业大学', 'major': '领域:农业基础科学、农艺学、环境科学与资源利用', 'title': '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'}, '12': {'name': '王萍', 'college': '重庆科技学院', 'major': '领域:地质学、石油天然气工业、海洋学', 'title': '志留纪生物礁研究进展:分布、演替及发育过程'}, '13': {'name': '谭先锋', 'college': '重庆科技学院', 'major': '领域:地质学、石油天然气工业、高等教育', 'title': '志留纪生物礁研究进展:分布、演替及发育过程'}, '14': {'name': '王佳', 'college': '重庆科技学院', 'major': '领域:地质学、石油天然气工业、高等教育', 'title': '志留纪生物礁研究进展:分布、演替及发育过程'}, '15': {'name': '李荭荭', 'college': '福建农林大学', 'major': '领域:环境科学与资源利用、农作物、生物学', 'title': '生物炭对铜污染土壤的修复及水稻Cu累积的影响'}, '16': {'name': '赵明柳', 'college': '福建农林大学', 'major': '领域:环境科学与资源利用、农作物', 'title': '生物炭对铜污染土壤的修复及水稻Cu累积的影响'}, '17': {'name': '董海霞', 'college': '福建农林大学', 'major': '领域:环境科学与资源利用、农作物', 'title': '生物炭对铜污染土壤的修复及水稻Cu累积的影响'}, '18': {'name': '邓欢', 'college': '长春科技学院', 'major': '领域:环境科学与资源利用、农业基础科学、高等教育', 'title': '褐煤提质废水生物处理系统启动期菌群结构动态变化'}, '19': {'name': '陆海', 'college': '吉林建筑大学', 'major': '领域:环境科学与资源利用、建筑科学与工程、工业通用技术及设备', 'title': '褐煤提质废水生物处理系统启动期菌群结构动态变化'}, '20': {'name': '张小雨', 'college': '吉林建筑大学', 'major': '领域:环境科学与资源利用、建筑科学与工程、预防医学与卫生学', 'title': '褐煤提质废水生物处理系统启动期菌群结构动态变化'}} from ['192.168.43.241', 9002], saving... +2022-07-08 09:26:40.070 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:26:40.070 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:26:40.070 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 0a8d4080b221cae9b4ac824c20bff322d237b91b +2022-07-08 09:26:40.118 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56447): {'report_free': 'success marked 0a8d4080b221cae9b4ac824c20bff322d237b91b', 'type': 'report_free'} +2022-07-08 09:26:40.620 | INFO | dcs.requester:run:66 - [REMOTE] receiving remote task result {'0': {'name': '范阜东', 'college': '南京大学医学院附属鼓楼医院', 'major': '领域:外科学、心血管系统疾病、生物医学工程', 'title': '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'}, '1': {'name': '汤鑫龙', 'college': '南京大学医学院附属鼓楼医院', 'major': '领域:心血管系统疾病、中药学、外科学', 'title': '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'}, '2': {'name': '周庆', 'college': '南京大学医学院附属鼓楼医院', 'major': '领域:外科学、心血管系统疾病、生物医学工程', 'title': '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'}, '3': {'name': '刘丽婷', 'college': '陕西煤业化工技术研究院有限责任公司', 'major': '领域:燃料化工、有机化工、化学', 'title': 'XPS表面分析技术在生物医用金属材料研究中的应用'}, '4': {'name': '王岩', 'college': '北京自动化控制设备研究所', 'major': '领域:航空航天科学与工程、仪器仪表工业、武器工业与军事技术', 'title': 'XPS表面分析技术在生物医用金属材料研究中的应用'}, '5': {'name': '李怡雪', 'college': '西北工业大学', 'major': '领域:生物医学工程、金属学及金属工艺', 'title': 'XPS表面分析技术在生物医用金属材料研究中的应用'}, '6': {'name': '周尚', 'college': '中国海洋大学', 'major': '领域:海洋学、地质学', 'title': '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'}, '7': {'name': '徐继尚', 'college': '中国海洋大学', 'major': '领域:海洋学、地质学、材料科学', 'title': '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'}, '8': {'name': '刘勇', 'college': '中国海洋大学', 'major': '领域:海洋学、地质学、贸易经济', 'title': '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'}, '9': {'name': '张洁', 'college': '新疆环境保护科学研究院', 'major': '领域:环境科学与资源利用、农业基础科学、农艺学', 'title': '生物炭修复石油烃及多环芳烃污染土壤的研究进展'}, '10': {'name': '王健', 'college': '路易斯安那州立大学', 'major': '领域:环境科学与资源利用', 'title': '生物炭修复石油烃及多环芳烃污染土壤的研究进展'}, '11': {'name': '俞音', 'college': '新疆环境保护科学研究院', 'major': '领域:环境科学与资源利用、石油天然气工业、农业经济', 'title': '生物炭修复石油烃及多环芳烃污染土壤的研究进展'}, '12': {'name': '于亚楠', 'college': '南京农业大学', 'major': '领域:农业基础科学、农艺学、园艺', 'title': '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'}, '13': {'name': '邬海燕', 'college': '南京农业大学', 'major': '领域:生物学、农业基础科学、农艺学', 'title': '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'}, '14': {'name': '王盼星', 'college': '南京农业大学', 'major': '领域:农业基础科学、农艺学、园艺', 'title': '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'}, '15': {'name': '党晓宏', 'college': '内蒙古农业大学', 'major': '领域:林业、生物学、农业基础科学', 'title': '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'}, '16': {'name': '刘阳', 'college': '内蒙古水利科学研究院', 'major': '领域:林业、农业基础科学、农艺学', 'title': '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'}, '17': {'name': '蒙仲举', 'college': '内蒙古农业大学', 'major': '领域:农业基础科学、畜牧与动物医学、农艺学', 'title': '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'}, '18': {'name': '袁根', 'college': '南京林业大学', 'major': '领域:环境科学与资源利用', 'title': '生物炭对施用沼液稻田土壤重金属生物有效性的影响'}, '19': {'name': '汤逸帆', 'college': '南京林业大学', 'major': '领域:农业基础科学、农艺学、环境科学与资源利用', 'title': '生物炭对施用沼液稻田土壤重金属生物有效性的影响'}, '20': {'name': '申建华', 'college': '中粮肉食(江苏)有限公司', 'major': '领域:农业基础科学、农艺学、环境科学与资源利用', 'title': '生物炭对施用沼液稻田土壤重金属生物有效性的影响'}, '21': {'name': '高占斌', 'college': '集美大学', 'major': '领域:船舶工业、动力工程、机械工业', 'title': '相继增压柴油机掺混生物柴油燃烧的性能影响研究'}, '22': {'name': '王彬彬', 'college': '集美大学', 'major': '领域:船舶工业、动力工程', 'title': '相继增压柴油机掺混生物柴油燃烧的性能影响研究'}, '23': {'name': '高敬博', 'college': '集美大学', 'major': '领域:船舶工业、动力工程', 'title': '相继增压柴油机掺混生物柴油燃烧的性能影响研究'}, '24': {'name': '白嘉骏', 'college': '吉林农业大学', 'major': '领域:农业基础科学、农艺学', 'title': '田间自然陈化生物炭组成特征及对黑土有机碳的影响'}, '25': {'name': '刘松健', 'college': '吉林工程技术师范学院', 'major': '领域:农业基础科学、农艺学', 'title': '田间自然陈化生物炭组成特征及对黑土有机碳的影响'}, '26': {'name': '窦森', 'college': '吉林农业大学', 'major': '领域:农业基础科学、农艺学、环境科学与资源利用', 'title': '田间自然陈化生物炭组成特征及对黑土有机碳的影响'}, '27': {'name': '郭琦', 'college': '西北农林科技大学', 'major': '领域:农艺学、农业基础科学、生物学', 'title': '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'}, '28': {'name': '卜崇峰', 'college': '中国科学院水利部水土保持研究所', 'major': '领域:农业基础科学、农艺学、生物学', 'title': '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'}, '29': {'name': '李宜坪', 'college': '西北农林科技大学', 'major': '领域:农业基础科学、农艺学、环境科学与资源利用', 'title': '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'}} from ['192.168.43.241', 9000], saving... +2022-07-08 09:26:41.079 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:26:41.079 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:26:41.079 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 62630b238efeddc07694a7def5884fba8fb7cc29 +2022-07-08 09:26:41.127 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56449): {'report_free': 'success marked 62630b238efeddc07694a7def5884fba8fb7cc29', 'type': 'report_free'} +2022-07-08 09:26:42.998 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9002], ['192.168.43.241', 9001], ['192.168.43.241', 9000]] +2022-07-08 09:26:42.998 | INFO | dcs.tests.spider_task:compose_result:124 - [COMPOSE] composing task... +2022-07-08 09:26:43.564 | INFO | dcs.tests.spider_task:compose_result:131 - [RESULT] [('赵润州', '军事医学科学院', '领域:特种医学、军事医学与卫生、自动化技术', '从美国博德研究所成功之道看生命科学前沿创新'), ('刘术', '军事医学科学院', '领域:特种医学、军事医学与卫生、军事', '从美国博德研究所成功之道看生命科学前沿创新'), ('房媛', '陕西服装工程学院', '领域:有机化工、高等教育、化学', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('董林娟', '陕西服装工程学院', '领域:中药学、高等教育、医学教育与医学边缘学科', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('石钰', '陕西服装工程学院', '领域:高等教育、医学教育与医学边缘学科、中药学', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('田艳艳', '国家自然科学基金委员会生命科学部', '领域:生物学、基础医学、医学教育与医学边缘学科', '2021年度生命科学部基金项目评审工作综述'), ('赵海铭', '国家自然科学基金委员会生命科学部', '领域:生物学、化学、有机化工', '2021年度生命科学部基金项目评审工作综述'), ('朱孟娟', '国家自然科学基金委员会生命科学部', '领域:自然科学理论与方法', '2021年度生命科学部基金项目评审工作综述'), ('李亮', '河北师范大学汇华学院', '领域:中等教育、高等教育、人口学与计划生育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('段婷娟', '', '领域:中等教育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('穆旭同', '', '领域:中等教育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('房媛', '陕西服装工程学院', '领域:有机化工、高等教育、化学', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('董林娟', '陕西服装工程学院', '领域:中药学、高等教育、医学教育与医学边缘学科', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('石钰', '陕西服装工程学院', '领域:高等教育、医学教育与医学边缘学科、中药学', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('罗梓超', '北京市科学技术情报研究所', '领域:信息经济与邮政经济、工业经济、科学研究管理', '中美生命科学科研现状对比研究'), ('李荣', '北京市科学技术情报研究所', '领域:图书情报与数字图书馆、科学研究管理、工业经济', '中美生命科学科研现状对比研究'), ('董晓晴', '北京市科学技术情报研究所', '领域:科学研究管理、图书情报与数字图书馆、互联网技术', '中美生命科学科研现状对比研究'), ('杨淑萍', '石河子大学', '领域:生物学、中等教育、初等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('郝渊博', '石河子大学', '领域:初等教育、中等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('金冬桂', '石河子大学', '领域:中等教育、初等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('王郅媛', '北京市科学仪器装备协作服务中心', '领域:轻工业手工业、园艺、生物学', '生命科学仪器现状及北京支持方向建议'), ('杨鹏宇', '北京市科学仪器装备协作服务中心', '领域:仪器仪表工业、建筑科学与工程、矿业工程', '生命科学仪器现状及北京支持方向建议'), ('解静', '北京市科学仪器装备协作服务中心', '领域:工业经济、仪器仪表工业、矿业工程', '生命科学仪器现状及北京支持方向建议'), ('覃香香', '广西壮族自治区中国科学院广西植物研究所', '领域:轻工业手工业、有机化工、一般化学工业', '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'), ('周玉恒', '中国科学院广西植物研究所', '领域:轻工业手工业、有机化工、化学', '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'), ('陈海珊', '中国科学院广西植物研究所', '领域:有机化工、轻工业手工业、植物保护', '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'), ('李亚红', '天津市海水淡化与综合利用研究所', '领域:环境科学与资源利用、海洋学、无机化工', '聚合物类阻垢剂在海水中的可生物降解性'), ('赵小芳', '国家海洋局天津海水淡化与综合利用研究所', '领域:环境科学与资源利用、海洋学、无机化工', '聚合物类阻垢剂在海水中的可生物降解性'), ('周筝', '天津市海水淡化与综合利用研究所', '领域:环境科学与资源利用、海洋学、无机化工', '聚合物类阻垢剂在海水中的可生物降解性'), ('何义', '桂林医学院', '领域:医学教育与医学边缘学科、药学、高等教育', '病原微生物实验室生物安全管理探讨'), ('吴丹', '桂林医学院', '领域:畜牧与动物医学、药学、医学教育与医学边缘学科', '病原微生物实验室生物安全管理探讨'), ('蒋莲秀', '桂林医学院', '领域:药学、农业基础科学、医学教育与医学边缘学科', '病原微生物实验室生物安全管理探讨'), ('高尚志', '吉林农业大学', '领域:农业基础科学、农艺学', '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'), ('刘日月', '吉林农业大学', '领域:农业基础科学、农艺学、中药学', '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'), ('窦森', '吉林农业大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'), ('王萍', '重庆科技学院', '领域:地质学、石油天然气工业、海洋学', '志留纪生物礁研究进展:分布、演替及发育过程'), ('谭先锋', '重庆科技学院', '领域:地质学、石油天然气工业、高等教育', '志留纪生物礁研究进展:分布、演替及发育过程'), ('王佳', '重庆科技学院', '领域:地质学、石油天然气工业、高等教育', '志留纪生物礁研究进展:分布、演替及发育过程'), ('李荭荭', '福建农林大学', '领域:环境科学与资源利用、农作物、生物学', '生物炭对铜污染土壤的修复及水稻Cu累积的影响'), ('赵明柳', '福建农林大学', '领域:环境科学与资源利用、农作物', '生物炭对铜污染土壤的修复及水稻Cu累积的影响'), ('董海霞', '福建农林大学', '领域:环境科学与资源利用、农作物', '生物炭对铜污染土壤的修复及水稻Cu累积的影响'), ('邓欢', '长春科技学院', '领域:环境科学与资源利用、农业基础科学、高等教育', '褐煤提质废水生物处理系统启动期菌群结构动态变化'), ('陆海', '吉林建筑大学', '领域:环境科学与资源利用、建筑科学与工程、工业通用技术及设备', '褐煤提质废水生物处理系统启动期菌群结构动态变化'), ('张小雨', '吉林建筑大学', '领域:环境科学与资源利用、建筑科学与工程、预防医学与卫生学', '褐煤提质废水生物处理系统启动期菌群结构动态变化'), ('范阜东', '南京大学医学院附属鼓楼医院', '领域:外科学、心血管系统疾病、生物医学工程', '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'), ('汤鑫龙', '南京大学医学院附属鼓楼医院', '领域:心血管系统疾病、中药学、外科学', '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'), ('周庆', '南京大学医学院附属鼓楼医院', '领域:外科学、心血管系统疾病、生物医学工程', '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'), ('刘丽婷', '陕西煤业化工技术研究院有限责任公司', '领域:燃料化工、有机化工、化学', 'XPS表面分析技术在生物医用金属材料研究中的应用'), ('王岩', '北京自动化控制设备研究所', '领域:航空航天科学与工程、仪器仪表工业、武器工业与军事技术', 'XPS表面分析技术在生物医用金属材料研究中的应用'), ('李怡雪', '西北工业大学', '领域:生物医学工程、金属学及金属工艺', 'XPS表面分析技术在生物医用金属材料研究中的应用'), ('周尚', '中国海洋大学', '领域:海洋学、地质学', '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'), ('徐继尚', '中国海洋大学', '领域:海洋学、地质学、材料科学', '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'), ('刘勇', '中国海洋大学', '领域:海洋学、地质学、贸易经济', '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'), ('张洁', '新疆环境保护科学研究院', '领域:环境科学与资源利用、农业基础科学、农艺学', '生物炭修复石油烃及多环芳烃污染土壤的研究进展'), ('王健', '路易斯安那州立大学', '领域:环境科学与资源利用', '生物炭修复石油烃及多环芳烃污染土壤的研究进展'), ('俞音', '新疆环境保护科学研究院', '领域:环境科学与资源利用、石油天然气工业、农业经济', '生物炭修复石油烃及多环芳烃污染土壤的研究进展'), ('于亚楠', '南京农业大学', '领域:农业基础科学、农艺学、园艺', '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'), ('邬海燕', '南京农业大学', '领域:生物学、农业基础科学、农艺学', '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'), ('王盼星', '南京农业大学', '领域:农业基础科学、农艺学、园艺', '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'), ('党晓宏', '内蒙古农业大学', '领域:林业、生物学、农业基础科学', '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'), ('刘阳', '内蒙古水利科学研究院', '领域:林业、农业基础科学、农艺学', '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'), ('蒙仲举', '内蒙古农业大学', '领域:农业基础科学、畜牧与动物医学、农艺学', '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'), ('袁根', '南京林业大学', '领域:环境科学与资源利用', '生物炭对施用沼液稻田土壤重金属生物有效性的影响'), ('汤逸帆', '南京林业大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '生物炭对施用沼液稻田土壤重金属生物有效性的影响'), ('申建华', '中粮肉食(江苏)有限公司', '领域:农业基础科学、农艺学、环境科学与资源利用', '生物炭对施用沼液稻田土壤重金属生物有效性的影响'), ('高占斌', '集美大学', '领域:船舶工业、动力工程、机械工业', '相继增压柴油机掺混生物柴油燃烧的性能影响研究'), ('王彬彬', '集美大学', '领域:船舶工业、动力工程', '相继增压柴油机掺混生物柴油燃烧的性能影响研究'), ('高敬博', '集美大学', '领域:船舶工业、动力工程', '相继增压柴油机掺混生物柴油燃烧的性能影响研究'), ('白嘉骏', '吉林农业大学', '领域:农业基础科学、农艺学', '田间自然陈化生物炭组成特征及对黑土有机碳的影响'), ('刘松健', '吉林工程技术师范学院', '领域:农业基础科学、农艺学', '田间自然陈化生物炭组成特征及对黑土有机碳的影响'), ('窦森', '吉林农业大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '田间自然陈化生物炭组成特征及对黑土有机碳的影响'), ('郭琦', '西北农林科技大学', '领域:农艺学、农业基础科学、生物学', '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'), ('卜崇峰', '中国科学院水利部水土保持研究所', '领域:农业基础科学、农艺学、生物学', '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'), ('李宜坪', '西北农林科技大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例')] +2022-07-08 09:26:43.580 | INFO | dcs.tests.spider_task:compose_result:132 - [DATABASE] writing crawl results to database... +2022-07-08 09:26:43.580 | INFO | dcs.tools.database:write_results2database:203 - [DATABASE] writing 2st crawl results to table wfy_crawl_result in database... +2022-07-08 09:26:45.327 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 2st crawl results! +2022-07-08 09:26:46.160 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 59962): {'crawl_id': 2, 'table_name': 'wfy_crawl_result', 'type': 'response'} +2022-07-08 09:26:46.317 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('192.168.43.64', 59962)! +2022-07-08 09:27:03.523 | INFO | dcs.server:run:25 - [SERVER] connected to client ('192.168.43.64', 59978) +2022-07-08 09:27:03.523 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('192.168.43.64', 59978)! +2022-07-08 09:27:04.246 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:27:04.246 | INFO | dcs.tests.spider_task:distribute_task:104 - [TASK] distributing task: (('192.168.43.64', 59978), {'action': 'crawl zhiwang', 'word': '光学', 'pages_start': 1, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'}) +2022-07-08 09:27:04.246 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9001], ['192.168.43.241', 9002], ['192.168.43.241', 9000]] +2022-07-08 09:27:04.246 | INFO | dcs.tests.spider_task:run:155 - [TASK] generating remote task {'action': 'crawl zhiwang', 'word': '光学', 'pages_start': 1, 'pages_end': 2, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'} +2022-07-08 09:27:04.246 | INFO | dcs.requester:run:59 - [REQUESTER] sending request {'action': 'crawl zhiwang', 'word': '光学', 'pages_start': 1, 'pages_end': 2, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb', 'type': 'request'} to client ['192.168.43.241', 9001]... +2022-07-08 09:27:04.325 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 59978): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:27:05.254 | INFO | dcs.tests.spider_task:run:155 - [TASK] generating remote task {'action': 'crawl zhiwang', 'word': '光学', 'pages_start': 2, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'} +2022-07-08 09:27:05.254 | INFO | dcs.requester:run:59 - [REQUESTER] sending request {'action': 'crawl zhiwang', 'word': '光学', 'pages_start': 2, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb', 'type': 'request'} to client ['192.168.43.241', 9002]... +2022-07-08 09:27:11.271 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9000]] +2022-07-08 09:27:16.272 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9000]] +2022-07-08 09:27:17.568 | INFO | dcs.requester:run:66 - [REMOTE] receiving remote task result {'0': {'name': '贾娜', 'college': '解放军91550部队', 'major': '领域:电信技术、计算机软件及计算机应用、自动化技术', 'title': '基于光电测量技术的光学元件表面缺陷自动识别方法研究'}, '1': {'name': '周媛媛', 'college': '重庆师范大学涉外商贸学院', 'major': '领域:计算机软件及计算机应用、自动化技术', 'title': '基于深度学习理论的光学分子成像图像重建方法'}, '2': {'name': '王杨丽', 'college': '重庆师范大学涉外商贸学院', 'major': '领域:高等教育、计算机软件及计算机应用、自动化技术', 'title': '基于深度学习理论的光学分子成像图像重建方法'}, '3': {'name': '易仕和', 'college': '国防科学技术大学', 'major': '领域:航空航天科学与工程、力学、物理学', 'title': '适用高超声速飞行环境的超声速气膜冷却光学窗口研究进展'}, '4': {'name': '丁浩林', 'college': '国防科学技术大学', 'major': '领域:武器工业与军事技术、航空航天科学与工程、力学', 'title': '适用高超声速飞行环境的超声速气膜冷却光学窗口研究进展'}, '5': {'name': '李卓', 'college': '解放军91404部队', 'major': '领域:无线电电子学、航空航天科学与工程、仪器仪表工业', 'title': '3.7~4.8μm红外二次成像折反射式光学系统设计'}, '6': {'name': '叶宗民', 'college': '解放军91404部队', 'major': '领域:无线电电子学、武器工业与军事技术、计算机软件及计算机应用', 'title': '3.7~4.8μm红外二次成像折反射式光学系统设计'}, '7': {'name': '孙保杰', 'college': '解放军91404部队', 'major': '领域:电信技术、武器工业与军事技术、仪器仪表工业', 'title': '3.7~4.8μm红外二次成像折反射式光学系统设计'}, '8': {'name': '张璐', 'college': '华北光电技术研究所', 'major': '领域:无线电电子学、仪器仪表工业、金属学及金属工艺', 'title': '红外探测器集成光学系统低温评价方法研究'}, '9': {'name': '张磊', 'college': '华北光电技术研究所', 'major': '领域:无线电电子学、仪器仪表工业、金属学及金属工艺', 'title': '红外探测器集成光学系统低温评价方法研究'}, '10': {'name': '付志凯', 'college': '华北光电技术研究所', 'major': '领域:无线电电子学、仪器仪表工业、电力工业', 'title': '红外探测器集成光学系统低温评价方法研究'}, '11': {'name': '罗辉', 'college': '武汉工程大学', 'major': '领域:电信技术、无线电电子学', 'title': '近地层紫外通信收/发一体光学系统技术研究'}, '12': {'name': '李杰', 'college': '武汉工程大学', 'major': '领域:无线电电子学、电信技术、航空航天科学与工程', 'title': '近地层紫外通信收/发一体光学系统技术研究'}, '13': {'name': '李金铖', 'college': '武汉工程大学', 'major': '领域:电信技术、无线电电子学', 'title': '近地层紫外通信收/发一体光学系统技术研究'}, '14': {'name': '李江勇', 'college': '华北光电技术研究所', 'major': '领域:仪器仪表工业、无线电电子学、计算机软件及计算机应用', 'title': '基于全局性优化的极简光学系统设计'}, '15': {'name': '吴晓琴', 'college': '西安电子科技大学', 'major': '领域:计算机软件及计算机应用、物理学、无线电电子学', 'title': '基于全局性优化的极简光学系统设计'}, '16': {'name': '刘飞', 'college': '西安电子科技大学', 'major': '领域:计算机软件及计算机应用、物理学、无线电电子学', 'title': '基于全局性优化的极简光学系统设计'}, '17': {'name': '李小燕', 'college': '华侨大学', 'major': '领域:仪器仪表工业、物理学、无线电电子学', 'title': '基于线上线下混合模式的工程光学综合实验平台的建设研究'}, '18': {'name': '任洪亮', 'college': '华侨大学', 'major': '领域:物理学、仪器仪表工业、无线电电子学', 'title': '基于线上线下混合模式的工程光学综合实验平台的建设研究'}, '19': {'name': '张奚宁', 'college': '华侨大学', 'major': '领域:物理学、无线电电子学、仪器仪表工业', 'title': '基于线上线下混合模式的工程光学综合实验平台的建设研究'}, '20': {'name': '梁静远', 'college': '西安理工大学', 'major': '领域:电信技术、无线电电子学', 'title': '自由空间光通信系统光学天线技术研究进展'}, '21': {'name': '亢维龙', 'college': '西安理工大学', 'major': '领域:电信技术', 'title': '自由空间光通信系统光学天线技术研究进展'}, '22': {'name': '董壮', 'college': '西安理工大学', 'major': '领域:电信技术', 'title': '自由空间光通信系统光学天线技术研究进展'}, '23': {'name': '苏春轩', 'college': '中国科学院光电技术研究所', 'major': '领域:物理学、无线电电子学、自动化技术', 'title': '基于波前传感器标定优化的自适应光学校正方法'}, '24': {'name': '董理治', 'college': '中国科学院光电技术研究所', 'major': '领域:物理学、仪器仪表工业、无线电电子学', 'title': '基于波前传感器标定优化的自适应光学校正方法'}, '25': {'name': '樊新龙', 'college': '中国科学院光电技术研究所', 'major': '领域:仪器仪表工业、天文学、物理学', 'title': '基于波前传感器标定优化的自适应光学校正方法'}} from ['192.168.43.241', 9002], saving... +2022-07-08 09:27:17.726 | INFO | dcs.requester:run:66 - [REMOTE] receiving remote task result {'0': {'name': '孟庆宇', 'college': '中国科学院长春光学精密机械与物理研究所', 'major': '领域:仪器仪表工业、航空航天科学与工程、天文学', 'title': '三镜反射式光学系统综述'}, '1': {'name': '毛玉林', 'college': '北京敏视达雷达有限公司', 'major': '领域:电信技术', 'title': '激光通信与成像卡式收发光学天线结构初解'}, '2': {'name': '舒仕江', 'college': '北京敏视达雷达有限公司', 'major': '领域:电信技术、仪器仪表工业、气象学', 'title': '激光通信与成像卡式收发光学天线结构初解'}, '3': {'name': '吴艳锋', 'college': '北京敏视达雷达有限公司', 'major': '领域:电信技术、气象学、无线电电子学', 'title': '激光通信与成像卡式收发光学天线结构初解'}, '4': {'name': '曹钟予', 'college': '长春理工大学', 'major': '领域:仪器仪表工业、电信技术、临床医学', 'title': '长工作距的3D变倍外视镜光学系统设计'}, '5': {'name': '向阳', 'college': '长春理工大学', 'major': '领域:仪器仪表工业、无线电电子学、物理学', 'title': '长工作距的3D变倍外视镜光学系统设计'}, '6': {'name': '尹爱萍', 'college': '忻州师范学院', 'major': '领域:化学、高等教育、轻工业手工业', 'title': '三联噻吩基查尔酮衍生物的线性光学性质和超快非线性光学响应'}, '7': {'name': '孙金鱼', 'college': '忻州师范学院', 'major': '领域:化学、有机化工、材料科学', 'title': '三联噻吩基查尔酮衍生物的线性光学性质和超快非线性光学响应'}, '8': {'name': '石玉芳', 'college': '忻州师范学院', 'major': '领域:化学、有机化工、材料科学', 'title': '三联噻吩基查尔酮衍生物的线性光学性质和超快非线性光学响应'}, '9': {'name': '王天明', 'college': '电子科技大学', 'major': '领域:物理学、仪器仪表工业、无线电电子学', 'title': '高功率激光作用下光学元件非线性热效应研究'}, '10': {'name': '李斌成', 'college': '电子科技大学', 'major': '领域:仪器仪表工业、物理学、无线电电子学', 'title': '高功率激光作用下光学元件非线性热效应研究'}, '11': {'name': '赵斌兴', 'college': '电子科技大学', 'major': '领域:仪器仪表工业、材料科学、物理学', 'title': '高功率激光作用下光学元件非线性热效应研究'}, '12': {'name': '曾晨欣', 'college': '苏州大学', 'major': '领域:仪器仪表工业、计算机软件及计算机应用、航空航天科学与工程', 'title': '超轻小宽视场高分辨无人机机载相机光学系统设计'}, '13': {'name': '李加慧', 'college': '苏州大学', 'major': '领域:仪器仪表工业、工业通用技术及设备、航空航天科学与工程', 'title': '超轻小宽视场高分辨无人机机载相机光学系统设计'}, '14': {'name': '谭奋利', 'college': '苏州大学', 'major': '领域:仪器仪表工业、计算机软件及计算机应用、航空航天科学与工程', 'title': '超轻小宽视场高分辨无人机机载相机光学系统设计'}, '15': {'name': '隋博', 'college': '长春理工大学', 'major': '领域:物理学、仪器仪表工业', 'title': '红外衍射光学模芯的超精密车削工艺与优化'}, '16': {'name': '霍富荣', 'college': '长春理工大学', 'major': '领域:计算机软件及计算机应用、物理学、武器工业与军事技术', 'title': '红外衍射光学模芯的超精密车削工艺与优化'}, '17': {'name': '李闯', 'college': '长春理工大学', 'major': '领域:仪器仪表工业、物理学、工业通用技术及设备', 'title': '红外衍射光学模芯的超精密车削工艺与优化'}, '18': {'name': '侯灿', 'college': '安徽省气象科学研究所', 'major': '领域:环境科学与资源利用、气象学、农业基础科学', 'title': '基于长期观测的淮河流域农田背景区灰霾污染气溶胶光学特性和类型分析'}, '19': {'name': '黄勇', 'college': '安徽省气象科学研究所', 'major': '领域:气象学、环境科学与资源利用、农业基础科学', 'title': '基于长期观测的淮河流域农田背景区灰霾污染气溶胶光学特性和类型分析'}, '20': {'name': '吴文玉', 'college': '中国气象局', 'major': '领域:气象学、农业基础科学、环境科学与资源利用', 'title': '基于长期观测的淮河流域农田背景区灰霾污染气溶胶光学特性和类型分析'}, '21': {'name': '张凯胜', 'college': '中国科学院西安光学精密机械研究所', 'major': '领域:仪器仪表工业、金属学及金属工艺、电信技术', 'title': '大相对孔径全天时星敏感器光学系统'}, '22': {'name': '苏秀琴', 'college': '青岛海洋科学与技术国家实验室', 'major': '领域:计算机软件及计算机应用、电信技术、仪器仪表工业', 'title': '大相对孔径全天时星敏感器光学系统'}, '23': {'name': '叶志龙', 'college': '上海航天控制工程研究所', 'major': '领域:仪器仪表工业、航空航天科学与工程、电信技术', 'title': '大相对孔径全天时星敏感器光学系统'}, '24': {'name': '谭振坤', 'college': '西安工业大学', 'major': '领域:电信技术、仪器仪表工业、无线电电子学', 'title': '双光学频率梳的多波长外差干涉测距方法研究'}, '25': {'name': '李瑶', 'college': '西安工业大学', 'major': '领域:武器工业与军事技术、物理学、无线电电子学', 'title': '双光学频率梳的多波长外差干涉测距方法研究'}, '26': {'name': '孔英秀', 'college': '西安工业大学', 'major': '领域:电信技术、电力工业、工业通用技术及设备', 'title': '双光学频率梳的多波长外差干涉测距方法研究'}} from ['192.168.43.241', 9001], saving... +2022-07-08 09:27:18.390 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:27:18.390 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:27:18.390 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 0a8d4080b221cae9b4ac824c20bff322d237b91b +2022-07-08 09:27:18.454 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56447): {'report_free': 'success marked 0a8d4080b221cae9b4ac824c20bff322d237b91b', 'type': 'report_free'} +2022-07-08 09:27:19.402 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:27:19.402 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:27:19.402 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 73574248c657f81270205fcae7a7a839dd9d3500 +2022-07-08 09:27:19.465 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56448): {'report_free': 'success marked 73574248c657f81270205fcae7a7a839dd9d3500', 'type': 'report_free'} +2022-07-08 09:27:21.274 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9002], ['192.168.43.241', 9000], ['192.168.43.241', 9001]] +2022-07-08 09:27:21.274 | INFO | dcs.tests.spider_task:compose_result:124 - [COMPOSE] composing task... +2022-07-08 09:27:22.245 | INFO | dcs.tests.spider_task:compose_result:131 - [RESULT] [('赵润州', '军事医学科学院', '领域:特种医学、军事医学与卫生、自动化技术', '从美国博德研究所成功之道看生命科学前沿创新'), ('刘术', '军事医学科学院', '领域:特种医学、军事医学与卫生、军事', '从美国博德研究所成功之道看生命科学前沿创新'), ('房媛', '陕西服装工程学院', '领域:有机化工、高等教育、化学', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('董林娟', '陕西服装工程学院', '领域:中药学、高等教育、医学教育与医学边缘学科', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('石钰', '陕西服装工程学院', '领域:高等教育、医学教育与医学边缘学科、中药学', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('田艳艳', '国家自然科学基金委员会生命科学部', '领域:生物学、基础医学、医学教育与医学边缘学科', '2021年度生命科学部基金项目评审工作综述'), ('赵海铭', '国家自然科学基金委员会生命科学部', '领域:生物学、化学、有机化工', '2021年度生命科学部基金项目评审工作综述'), ('朱孟娟', '国家自然科学基金委员会生命科学部', '领域:自然科学理论与方法', '2021年度生命科学部基金项目评审工作综述'), ('李亮', '河北师范大学汇华学院', '领域:中等教育、高等教育、人口学与计划生育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('段婷娟', '', '领域:中等教育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('穆旭同', '', '领域:中等教育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('房媛', '陕西服装工程学院', '领域:有机化工、高等教育、化学', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('董林娟', '陕西服装工程学院', '领域:中药学、高等教育、医学教育与医学边缘学科', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('石钰', '陕西服装工程学院', '领域:高等教育、医学教育与医学边缘学科、中药学', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('罗梓超', '北京市科学技术情报研究所', '领域:信息经济与邮政经济、工业经济、科学研究管理', '中美生命科学科研现状对比研究'), ('李荣', '北京市科学技术情报研究所', '领域:图书情报与数字图书馆、科学研究管理、工业经济', '中美生命科学科研现状对比研究'), ('董晓晴', '北京市科学技术情报研究所', '领域:科学研究管理、图书情报与数字图书馆、互联网技术', '中美生命科学科研现状对比研究'), ('杨淑萍', '石河子大学', '领域:生物学、中等教育、初等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('郝渊博', '石河子大学', '领域:初等教育、中等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('金冬桂', '石河子大学', '领域:中等教育、初等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('王郅媛', '北京市科学仪器装备协作服务中心', '领域:轻工业手工业、园艺、生物学', '生命科学仪器现状及北京支持方向建议'), ('杨鹏宇', '北京市科学仪器装备协作服务中心', '领域:仪器仪表工业、建筑科学与工程、矿业工程', '生命科学仪器现状及北京支持方向建议'), ('解静', '北京市科学仪器装备协作服务中心', '领域:工业经济、仪器仪表工业、矿业工程', '生命科学仪器现状及北京支持方向建议'), ('覃香香', '广西壮族自治区中国科学院广西植物研究所', '领域:轻工业手工业、有机化工、一般化学工业', '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'), ('周玉恒', '中国科学院广西植物研究所', '领域:轻工业手工业、有机化工、化学', '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'), ('陈海珊', '中国科学院广西植物研究所', '领域:有机化工、轻工业手工业、植物保护', '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'), ('李亚红', '天津市海水淡化与综合利用研究所', '领域:环境科学与资源利用、海洋学、无机化工', '聚合物类阻垢剂在海水中的可生物降解性'), ('赵小芳', '国家海洋局天津海水淡化与综合利用研究所', '领域:环境科学与资源利用、海洋学、无机化工', '聚合物类阻垢剂在海水中的可生物降解性'), ('周筝', '天津市海水淡化与综合利用研究所', '领域:环境科学与资源利用、海洋学、无机化工', '聚合物类阻垢剂在海水中的可生物降解性'), ('何义', '桂林医学院', '领域:医学教育与医学边缘学科、药学、高等教育', '病原微生物实验室生物安全管理探讨'), ('吴丹', '桂林医学院', '领域:畜牧与动物医学、药学、医学教育与医学边缘学科', '病原微生物实验室生物安全管理探讨'), ('蒋莲秀', '桂林医学院', '领域:药学、农业基础科学、医学教育与医学边缘学科', '病原微生物实验室生物安全管理探讨'), ('高尚志', '吉林农业大学', '领域:农业基础科学、农艺学', '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'), ('刘日月', '吉林农业大学', '领域:农业基础科学、农艺学、中药学', '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'), ('窦森', '吉林农业大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'), ('王萍', '重庆科技学院', '领域:地质学、石油天然气工业、海洋学', '志留纪生物礁研究进展:分布、演替及发育过程'), ('谭先锋', '重庆科技学院', '领域:地质学、石油天然气工业、高等教育', '志留纪生物礁研究进展:分布、演替及发育过程'), ('王佳', '重庆科技学院', '领域:地质学、石油天然气工业、高等教育', '志留纪生物礁研究进展:分布、演替及发育过程'), ('李荭荭', '福建农林大学', '领域:环境科学与资源利用、农作物、生物学', '生物炭对铜污染土壤的修复及水稻Cu累积的影响'), ('赵明柳', '福建农林大学', '领域:环境科学与资源利用、农作物', '生物炭对铜污染土壤的修复及水稻Cu累积的影响'), ('董海霞', '福建农林大学', '领域:环境科学与资源利用、农作物', '生物炭对铜污染土壤的修复及水稻Cu累积的影响'), ('邓欢', '长春科技学院', '领域:环境科学与资源利用、农业基础科学、高等教育', '褐煤提质废水生物处理系统启动期菌群结构动态变化'), ('陆海', '吉林建筑大学', '领域:环境科学与资源利用、建筑科学与工程、工业通用技术及设备', '褐煤提质废水生物处理系统启动期菌群结构动态变化'), ('张小雨', '吉林建筑大学', '领域:环境科学与资源利用、建筑科学与工程、预防医学与卫生学', '褐煤提质废水生物处理系统启动期菌群结构动态变化'), ('范阜东', '南京大学医学院附属鼓楼医院', '领域:外科学、心血管系统疾病、生物医学工程', '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'), ('汤鑫龙', '南京大学医学院附属鼓楼医院', '领域:心血管系统疾病、中药学、外科学', '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'), ('周庆', '南京大学医学院附属鼓楼医院', '领域:外科学、心血管系统疾病、生物医学工程', '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'), ('刘丽婷', '陕西煤业化工技术研究院有限责任公司', '领域:燃料化工、有机化工、化学', 'XPS表面分析技术在生物医用金属材料研究中的应用'), ('王岩', '北京自动化控制设备研究所', '领域:航空航天科学与工程、仪器仪表工业、武器工业与军事技术', 'XPS表面分析技术在生物医用金属材料研究中的应用'), ('李怡雪', '西北工业大学', '领域:生物医学工程、金属学及金属工艺', 'XPS表面分析技术在生物医用金属材料研究中的应用'), ('周尚', '中国海洋大学', '领域:海洋学、地质学', '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'), ('徐继尚', '中国海洋大学', '领域:海洋学、地质学、材料科学', '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'), ('刘勇', '中国海洋大学', '领域:海洋学、地质学、贸易经济', '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'), ('张洁', '新疆环境保护科学研究院', '领域:环境科学与资源利用、农业基础科学、农艺学', '生物炭修复石油烃及多环芳烃污染土壤的研究进展'), ('王健', '路易斯安那州立大学', '领域:环境科学与资源利用', '生物炭修复石油烃及多环芳烃污染土壤的研究进展'), ('俞音', '新疆环境保护科学研究院', '领域:环境科学与资源利用、石油天然气工业、农业经济', '生物炭修复石油烃及多环芳烃污染土壤的研究进展'), ('于亚楠', '南京农业大学', '领域:农业基础科学、农艺学、园艺', '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'), ('邬海燕', '南京农业大学', '领域:生物学、农业基础科学、农艺学', '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'), ('王盼星', '南京农业大学', '领域:农业基础科学、农艺学、园艺', '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'), ('党晓宏', '内蒙古农业大学', '领域:林业、生物学、农业基础科学', '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'), ('刘阳', '内蒙古水利科学研究院', '领域:林业、农业基础科学、农艺学', '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'), ('蒙仲举', '内蒙古农业大学', '领域:农业基础科学、畜牧与动物医学、农艺学', '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'), ('袁根', '南京林业大学', '领域:环境科学与资源利用', '生物炭对施用沼液稻田土壤重金属生物有效性的影响'), ('汤逸帆', '南京林业大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '生物炭对施用沼液稻田土壤重金属生物有效性的影响'), ('申建华', '中粮肉食(江苏)有限公司', '领域:农业基础科学、农艺学、环境科学与资源利用', '生物炭对施用沼液稻田土壤重金属生物有效性的影响'), ('高占斌', '集美大学', '领域:船舶工业、动力工程、机械工业', '相继增压柴油机掺混生物柴油燃烧的性能影响研究'), ('王彬彬', '集美大学', '领域:船舶工业、动力工程', '相继增压柴油机掺混生物柴油燃烧的性能影响研究'), ('高敬博', '集美大学', '领域:船舶工业、动力工程', '相继增压柴油机掺混生物柴油燃烧的性能影响研究'), ('白嘉骏', '吉林农业大学', '领域:农业基础科学、农艺学', '田间自然陈化生物炭组成特征及对黑土有机碳的影响'), ('刘松健', '吉林工程技术师范学院', '领域:农业基础科学、农艺学', '田间自然陈化生物炭组成特征及对黑土有机碳的影响'), ('窦森', '吉林农业大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '田间自然陈化生物炭组成特征及对黑土有机碳的影响'), ('郭琦', '西北农林科技大学', '领域:农艺学、农业基础科学、生物学', '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'), ('卜崇峰', '中国科学院水利部水土保持研究所', '领域:农业基础科学、农艺学、生物学', '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'), ('李宜坪', '西北农林科技大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'), ('贾娜', '解放军91550部队', '领域:电信技术、计算机软件及计算机应用、自动化技术', '基于光电测量技术的光学元件表面缺陷自动识别方法研究'), ('周媛媛', '重庆师范大学涉外商贸学院', '领域:计算机软件及计算机应用、自动化技术', '基于深度学习理论的光学分子成像图像重建方法'), ('王杨丽', '重庆师范大学涉外商贸学院', '领域:高等教育、计算机软件及计算机应用、自动化技术', '基于深度学习理论的光学分子成像图像重建方法'), ('易仕和', '国防科学技术大学', '领域:航空航天科学与工程、力学、物理学', '适用高超声速飞行环境的超声速气膜冷却光学窗口研究进展'), ('丁浩林', '国防科学技术大学', '领域:武器工业与军事技术、航空航天科学与工程、力学', '适用高超声速飞行环境的超声速气膜冷却光学窗口研究进展'), ('李卓', '解放军91404部队', '领域:无线电电子学、航空航天科学与工程、仪器仪表工业', '3.7~4.8μm红外二次成像折反射式光学系统设计'), ('叶宗民', '解放军91404部队', '领域:无线电电子学、武器工业与军事技术、计算机软件及计算机应用', '3.7~4.8μm红外二次成像折反射式光学系统设计'), ('孙保杰', '解放军91404部队', '领域:电信技术、武器工业与军事技术、仪器仪表工业', '3.7~4.8μm红外二次成像折反射式光学系统设计'), ('张璐', '华北光电技术研究所', '领域:无线电电子学、仪器仪表工业、金属学及金属工艺', '红外探测器集成光学系统低温评价方法研究'), ('张磊', '华北光电技术研究所', '领域:无线电电子学、仪器仪表工业、金属学及金属工艺', '红外探测器集成光学系统低温评价方法研究'), ('付志凯', '华北光电技术研究所', '领域:无线电电子学、仪器仪表工业、电力工业', '红外探测器集成光学系统低温评价方法研究'), ('罗辉', '武汉工程大学', '领域:电信技术、无线电电子学', '近地层紫外通信收/发一体光学系统技术研究'), ('李杰', '武汉工程大学', '领域:无线电电子学、电信技术、航空航天科学与工程', '近地层紫外通信收/发一体光学系统技术研究'), ('李金铖', '武汉工程大学', '领域:电信技术、无线电电子学', '近地层紫外通信收/发一体光学系统技术研究'), ('李江勇', '华北光电技术研究所', '领域:仪器仪表工业、无线电电子学、计算机软件及计算机应用', '基于全局性优化的极简光学系统设计'), ('吴晓琴', '西安电子科技大学', '领域:计算机软件及计算机应用、物理学、无线电电子学', '基于全局性优化的极简光学系统设计'), ('刘飞', '西安电子科技大学', '领域:计算机软件及计算机应用、物理学、无线电电子学', '基于全局性优化的极简光学系统设计'), ('李小燕', '华侨大学', '领域:仪器仪表工业、物理学、无线电电子学', '基于线上线下混合模式的工程光学综合实验平台的建设研究'), ('任洪亮', '华侨大学', '领域:物理学、仪器仪表工业、无线电电子学', '基于线上线下混合模式的工程光学综合实验平台的建设研究'), ('张奚宁', '华侨大学', '领域:物理学、无线电电子学、仪器仪表工业', '基于线上线下混合模式的工程光学综合实验平台的建设研究'), ('梁静远', '西安理工大学', '领域:电信技术、无线电电子学', '自由空间光通信系统光学天线技术研究进展'), ('亢维龙', '西安理工大学', '领域:电信技术', '自由空间光通信系统光学天线技术研究进展'), ('董壮', '西安理工大学', '领域:电信技术', '自由空间光通信系统光学天线技术研究进展'), ('苏春轩', '中国科学院光电技术研究所', '领域:物理学、无线电电子学、自动化技术', '基于波前传感器标定优化的自适应光学校正方法'), ('董理治', '中国科学院光电技术研究所', '领域:物理学、仪器仪表工业、无线电电子学', '基于波前传感器标定优化的自适应光学校正方法'), ('樊新龙', '中国科学院光电技术研究所', '领域:仪器仪表工业、天文学、物理学', '基于波前传感器标定优化的自适应光学校正方法'), ('孟庆宇', '中国科学院长春光学精密机械与物理研究所', '领域:仪器仪表工业、航空航天科学与工程、天文学', '三镜反射式光学系统综述'), ('毛玉林', '北京敏视达雷达有限公司', '领域:电信技术', '激光通信与成像卡式收发光学天线结构初解'), ('舒仕江', '北京敏视达雷达有限公司', '领域:电信技术、仪器仪表工业、气象学', '激光通信与成像卡式收发光学天线结构初解'), ('吴艳锋', '北京敏视达雷达有限公司', '领域:电信技术、气象学、无线电电子学', '激光通信与成像卡式收发光学天线结构初解'), ('曹钟予', '长春理工大学', '领域:仪器仪表工业、电信技术、临床医学', '长工作距的3D变倍外视镜光学系统设计'), ('向阳', '长春理工大学', '领域:仪器仪表工业、无线电电子学、物理学', '长工作距的3D变倍外视镜光学系统设计'), ('尹爱萍', '忻州师范学院', '领域:化学、高等教育、轻工业手工业', '三联噻吩基查尔酮衍生物的线性光学性质和超快非线性光学响应'), ('孙金鱼', '忻州师范学院', '领域:化学、有机化工、材料科学', '三联噻吩基查尔酮衍生物的线性光学性质和超快非线性光学响应'), ('石玉芳', '忻州师范学院', '领域:化学、有机化工、材料科学', '三联噻吩基查尔酮衍生物的线性光学性质和超快非线性光学响应'), ('王天明', '电子科技大学', '领域:物理学、仪器仪表工业、无线电电子学', '高功率激光作用下光学元件非线性热效应研究'), ('李斌成', '电子科技大学', '领域:仪器仪表工业、物理学、无线电电子学', '高功率激光作用下光学元件非线性热效应研究'), ('赵斌兴', '电子科技大学', '领域:仪器仪表工业、材料科学、物理学', '高功率激光作用下光学元件非线性热效应研究'), ('曾晨欣', '苏州大学', '领域:仪器仪表工业、计算机软件及计算机应用、航空航天科学与工程', '超轻小宽视场高分辨无人机机载相机光学系统设计'), ('李加慧', '苏州大学', '领域:仪器仪表工业、工业通用技术及设备、航空航天科学与工程', '超轻小宽视场高分辨无人机机载相机光学系统设计'), ('谭奋利', '苏州大学', '领域:仪器仪表工业、计算机软件及计算机应用、航空航天科学与工程', '超轻小宽视场高分辨无人机机载相机光学系统设计'), ('隋博', '长春理工大学', '领域:物理学、仪器仪表工业', '红外衍射光学模芯的超精密车削工艺与优化'), ('霍富荣', '长春理工大学', '领域:计算机软件及计算机应用、物理学、武器工业与军事技术', '红外衍射光学模芯的超精密车削工艺与优化'), ('李闯', '长春理工大学', '领域:仪器仪表工业、物理学、工业通用技术及设备', '红外衍射光学模芯的超精密车削工艺与优化'), ('侯灿', '安徽省气象科学研究所', '领域:环境科学与资源利用、气象学、农业基础科学', '基于长期观测的淮河流域农田背景区灰霾污染气溶胶光学特性和类型分析'), ('黄勇', '安徽省气象科学研究所', '领域:气象学、环境科学与资源利用、农业基础科学', '基于长期观测的淮河流域农田背景区灰霾污染气溶胶光学特性和类型分析'), ('吴文玉', '中国气象局', '领域:气象学、农业基础科学、环境科学与资源利用', '基于长期观测的淮河流域农田背景区灰霾污染气溶胶光学特性和类型分析'), ('张凯胜', '中国科学院西安光学精密机械研究所', '领域:仪器仪表工业、金属学及金属工艺、电信技术', '大相对孔径全天时星敏感器光学系统'), ('苏秀琴', '青岛海洋科学与技术国家实验室', '领域:计算机软件及计算机应用、电信技术、仪器仪表工业', '大相对孔径全天时星敏感器光学系统'), ('叶志龙', '上海航天控制工程研究所', '领域:仪器仪表工业、航空航天科学与工程、电信技术', '大相对孔径全天时星敏感器光学系统'), ('谭振坤', '西安工业大学', '领域:电信技术、仪器仪表工业、无线电电子学', '双光学频率梳的多波长外差干涉测距方法研究'), ('李瑶', '西安工业大学', '领域:武器工业与军事技术、物理学、无线电电子学', '双光学频率梳的多波长外差干涉测距方法研究'), ('孔英秀', '西安工业大学', '领域:电信技术、电力工业、工业通用技术及设备', '双光学频率梳的多波长外差干涉测距方法研究')] +2022-07-08 09:27:22.250 | INFO | dcs.tests.spider_task:compose_result:132 - [DATABASE] writing crawl results to database... +2022-07-08 09:27:22.250 | INFO | dcs.tools.database:write_results2database:203 - [DATABASE] writing 3st crawl results to table wfy_crawl_result in database... +2022-07-08 09:27:25.229 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 3st crawl results! +2022-07-08 09:27:25.511 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 59978): {'crawl_id': 3, 'table_name': 'wfy_crawl_result', 'type': 'response'} +2022-07-08 09:27:25.746 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('192.168.43.64', 59978)! +2022-07-08 09:29:15.184 | INFO | dcs.server:run:25 - [SERVER] connected to client ('192.168.43.64', 60151) +2022-07-08 09:29:15.184 | INFO | dcs.tests.requestHandler:run:30 - [REQUEST] start: communication begin from ('192.168.43.64', 60151)! +2022-07-08 09:29:15.391 | INFO | dcs.spider:run:25 - [REQUEST HANDLER] processing spider request... +2022-07-08 09:29:15.391 | INFO | dcs.tests.spider_task:distribute_task:104 - [TASK] distributing task: (('192.168.43.64', 60151), {'action': 'crawl zhiwang', 'word': '疫情', 'pages_start': 1, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'}) +2022-07-08 09:29:15.391 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9001], ['192.168.43.241', 9000], ['192.168.43.241', 9002]] +2022-07-08 09:29:15.391 | INFO | dcs.tests.spider_task:run:155 - [TASK] generating remote task {'action': 'crawl zhiwang', 'word': '疫情', 'pages_start': 1, 'pages_end': 2, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'} +2022-07-08 09:29:15.391 | INFO | dcs.requester:run:59 - [REQUESTER] sending request {'action': 'crawl zhiwang', 'word': '疫情', 'pages_start': 1, 'pages_end': 2, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb', 'type': 'request'} to client ['192.168.43.241', 9001]... +2022-07-08 09:29:15.470 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 60151): {'crawling state': 'starting, please wait...', 'type': 'crawling state'} +2022-07-08 09:29:16.400 | INFO | dcs.tests.spider_task:run:155 - [TASK] generating remote task {'action': 'crawl zhiwang', 'word': '疫情', 'pages_start': 2, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb'} +2022-07-08 09:29:16.400 | INFO | dcs.requester:run:59 - [REQUESTER] sending request {'action': 'crawl zhiwang', 'word': '疫情', 'pages_start': 2, 'pages_end': 3, 'cookie': '539e1a005fd291e79c85d2698ce4314960c562bb', 'type': 'request'} to client ['192.168.43.241', 9000]... +2022-07-08 09:29:22.414 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9002]] +2022-07-08 09:29:25.011 | INFO | dcs.requester:run:66 - [REMOTE] receiving remote task result {'0': {'name': '程云', 'college': '南开大学', 'major': '领域:旅游、安全科学与灾害防治、企业经济', 'title': '新冠肺炎疫情是否激发了康养旅游意愿?——一个条件过程模型的检验'}, '1': {'name': '殷杰', 'college': '华侨大学', 'major': '领域:旅游、贸易经济、服务业经济', 'title': '新冠肺炎疫情是否激发了康养旅游意愿?——一个条件过程模型的检验'}, '2': {'name': '梁喜', 'college': '重庆交通大学', 'major': '领域:企业经济、宏观经济管理与可持续发展、交通运输经济', 'title': '政府动态奖惩机制下重大疫情防控演化博弈研究'}, '3': {'name': '陈清卿', 'college': '重庆交通大学', 'major': '领域:预防医学与卫生学、行政学及国家行政管理', 'title': '政府动态奖惩机制下重大疫情防控演化博弈研究'}, '4': {'name': '王俊', 'college': '青岛医学院', 'major': '领域:医药卫生方针政策与法律法规研究、中药学', 'title': '我校大学生对新冠肺炎疫情的认知及心理行为调查'}, '5': {'name': '王帅', 'college': '青岛大学', 'major': '领域:医药卫生方针政策与法律法规研究、儿科学、肿瘤学', 'title': '我校大学生对新冠肺炎疫情的认知及心理行为调查'}, '6': {'name': '秦倪', 'college': '青岛大学', 'major': '领域:医药卫生方针政策与法律法规研究、肿瘤学、呼吸系统疾病', 'title': '我校大学生对新冠肺炎疫情的认知及心理行为调查'}, '7': {'name': '彭财伟', 'college': '浙江省湖州市南浔区疾病预防控制中心', 'major': '领域:生物学、预防医学与卫生学、基础医学', 'title': '湖州市南浔区某学校一起水痘疫情流行病学调查'}, '8': {'name': '杨丽萍', 'college': '浙江省湖州市南浔区疾病预防控制中心', 'major': '领域:感染性疾病及传染病、预防医学与卫生学、消化系统疾病', 'title': '湖州市南浔区某学校一起水痘疫情流行病学调查'}, '9': {'name': '刘彬辉', 'college': '浙江省湖州市南浔区疾病预防控制中心', 'major': '领域:预防医学与卫生学、感染性疾病及传染病、医药卫生方针政策与法律法规研究', 'title': '湖州市南浔区某学校一起水痘疫情流行病学调查'}, '10': {'name': '金银川', 'college': '空军军医大学', 'major': '领域:医学教育与医学边缘学科、精神病学、高等教育', 'title': '民众对新型冠状病毒肺炎疫情的风险认知、心理状态与行为变化的关系研究:心理弹性的中介作用'}, '11': {'name': '郭亚宁', 'college': '空军军医大学', 'major': '领域:基础医学、轻工业手工业、汽车工业', 'title': '民众对新型冠状病毒肺炎疫情的风险认知、心理状态与行为变化的关系研究:心理弹性的中介作用'}, '12': {'name': '时勘', 'college': '温州大学', 'major': '领域:心理学、企业经济、管理学', 'title': '民众对新型冠状病毒肺炎疫情的风险认知、心理状态与行为变化的关系研究:心理弹性的中介作用'}, '13': {'name': '黄少安', 'college': '山东大学', 'major': '领域:经济理论及经济思想史、经济体制改革、企业经济', 'title': '后疫情时期“疫情产业”转型升级问题研究'}, '14': {'name': '李少星', 'college': '山东大学', 'major': '领域:经济体制改革、宏观经济管理与可持续发展、建筑科学与工程', 'title': '后疫情时期“疫情产业”转型升级问题研究'}, '15': {'name': '汪意成', 'college': '北京大学', 'major': '领域:经济体制改革', 'title': '后疫情时期“疫情产业”转型升级问题研究'}, '16': {'name': '江南', 'college': '解放军信息工程大学', 'major': '领域:自然地理学和测绘学、计算机软件及计算机应用、电力工业', 'title': '每日疫情电子地图的设计与制作'}, '17': {'name': '郭玮', 'college': '解放军61206部队', 'major': '领域:自然地理学和测绘学、计算机软件及计算机应用、地理', 'title': '每日疫情电子地图的设计与制作'}} from ['192.168.43.241', 9001], saving... +2022-07-08 09:29:25.516 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:29:25.516 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:29:25.516 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 73574248c657f81270205fcae7a7a839dd9d3500 +2022-07-08 09:29:25.563 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56448): {'report_free': 'success marked 73574248c657f81270205fcae7a7a839dd9d3500', 'type': 'report_free'} +2022-07-08 09:29:26.053 | INFO | dcs.requester:run:66 - [REMOTE] receiving remote task result {'0': {'name': '滕俊磊', 'college': '中共湖南省娄底市委党校', 'major': '领域:行政学及国家行政管理、计算机软件及计算机应用、农业经济', 'title': '后疫情时代街头官僚行政逻辑转变:一个分析框架'}, '1': {'name': '田甜', 'college': '中共湖南省娄底市委党校', 'major': '领域:行政学及国家行政管理', 'title': '后疫情时代街头官僚行政逻辑转变:一个分析框架'}, '2': {'name': '陈凤娇', 'college': '东北财经大学', 'major': '领域:预防医学与卫生学', 'title': '重大传染病多渠道疫情信息发布模式的演化路径分析'}, '3': {'name': '刘德海', 'college': '东北财经大学', 'major': '领域:宏观经济管理与可持续发展、数学、行政学及国家行政管理', 'title': '重大传染病多渠道疫情信息发布模式的演化路径分析'}, '4': {'name': '周琴', 'college': '广州市疾病预防控制中心', 'major': '领域:肿瘤学、预防医学与卫生学、医药卫生方针政策与法律法规研究', 'title': '2020年新型冠状病毒肺炎疫情对广州市法定报告传染病的影响研究'}, '5': {'name': '李海麟', 'college': '广州市疾病预防控制中心', 'major': '领域:预防医学与卫生学、轻工业手工业、感染性疾病及传染病', 'title': '2020年新型冠状病毒肺炎疫情对广州市法定报告传染病的影响研究'}, '6': {'name': '刘远', 'college': '广州市疾病预防控制中心', 'major': '领域:预防医学与卫生学、感染性疾病及传染病、医药卫生方针政策与法律法规研究', 'title': '2020年新型冠状病毒肺炎疫情对广州市法定报告传染病的影响研究'}, '7': {'name': '丁若时', 'college': '宁波图书馆', 'major': '领域:图书情报与数字图书馆、新闻与传媒、中国近现代史', 'title': '基于数据可视化与词频分析的后疫情时代网借服务研究——以“天一约书”为例'}, '8': {'name': '毛婕', 'college': '浙江省宁波市图书馆', 'major': '领域:图书情报与数字图书馆', 'title': '基于数据可视化与词频分析的后疫情时代网借服务研究——以“天一约书”为例'}, '9': {'name': '胡冰迎彦', 'college': '浙江省宁波市图书馆', 'major': '领域:图书情报与数字图书馆、计算机软件及计算机应用', 'title': '基于数据可视化与词频分析的后疫情时代网借服务研究——以“天一约书”为例'}, '10': {'name': '唐勇', 'college': '西华师范大学', 'major': '领域:中国共产党、行政学及国家行政管理、政党及群众组织', 'title': '重大疫情防控中青年志愿服务的价值意蕴及路径优化'}, '11': {'name': '陈海', 'college': '西南大学', 'major': '领域:轻工业手工业、材料科学、高等教育', 'title': '后疫情时代下基于虚拟仿真技术提升食品科学与工程专业教学质量的探讨'}, '12': {'name': '朱瀚昆', 'college': '西南大学', 'major': '领域:轻工业手工业、有机化工、高等教育', 'title': '后疫情时代下基于虚拟仿真技术提升食品科学与工程专业教学质量的探讨'}, '13': {'name': '戴宏杰', 'college': '西南大学', 'major': '领域:轻工业手工业、有机化工、化学', 'title': '后疫情时代下基于虚拟仿真技术提升食品科学与工程专业教学质量的探讨'}, '14': {'name': '鲍昕', 'college': '南京邮电大学', 'major': '领域:预防医学与卫生学、自动化技术', 'title': '基于时空注意力机制的新冠疫情预测模型'}, '15': {'name': '谭智一', 'college': '南京邮电大学', 'major': '领域:电信技术、预防医学与卫生学、自动化技术', 'title': '基于时空注意力机制的新冠疫情预测模型'}, '16': {'name': '鲍秉坤', 'college': '南京邮电大学', 'major': '领域:计算机软件及计算机应用、自动化技术、汽车工业', 'title': '基于时空注意力机制的新冠疫情预测模型'}, '17': {'name': '陈昱帆', 'college': '河南农业大学', 'major': '领域:市场研究与信息、农业经济、畜牧与动物医学', 'title': '生猪疫情变动对猪肉价格的冲击效应与溢出效应研究'}, '18': {'name': '花俊国', 'college': '河南农业大学', 'major': '领域:农业经济、畜牧与动物医学、工业经济', 'title': '生猪疫情变动对猪肉价格的冲击效应与溢出效应研究'}, '19': {'name': '张俊华', 'college': '中国农业大学', 'major': '领域:农业经济、市场研究与信息、畜牧与动物医学', 'title': '生猪疫情变动对猪肉价格的冲击效应与溢出效应研究'}, '20': {'name': '汪越', 'college': '南京理工大学', 'major': '领域:数学、预防医学与卫生学', 'title': '数据驱动的突发疫情传染扩散参数动态更新策略'}, '21': {'name': '刘明', 'college': '南京理工大学', 'major': '领域:宏观经济管理与可持续发展、自动化技术、交通运输经济', 'title': '数据驱动的突发疫情传染扩散参数动态更新策略'}, '22': {'name': '曹杰', 'college': '徐州工程学院', 'major': '领域:宏观经济管理与可持续发展、计算机软件及计算机应用、环境科学与资源利用', 'title': '数据驱动的突发疫情传染扩散参数动态更新策略'}, '23': {'name': '李美琪', 'college': '中国农业科学院农业信息研究所', 'major': '领域:农业经济、市场研究与信息、经济体制改革', 'title': '非洲猪瘟疫情对我国肉类价格影响的区域异质性研究'}, '24': {'name': '季勇', 'college': '中国农业科学院', 'major': '领域:畜牧与动物医学、农业经济、人才学与劳动科学', 'title': '非洲猪瘟疫情对我国肉类价格影响的区域异质性研究'}, '25': {'name': '胡晨沛', 'college': '国家发展和改革委员会国际合作司', 'major': '领域:经济体制改革、农业经济、宏观经济管理与可持续发展', 'title': '非洲猪瘟疫情对我国肉类价格影响的区域异质性研究'}} from ['192.168.43.241', 9000], saving... +2022-07-08 09:29:26.527 | INFO | dcs.user_process:run:20 - [REQUEST HANDLER] processing user request... +2022-07-08 09:29:26.527 | INFO | dcs.tests.user_request_handler:report_state:16 - [REQUEST] report free +2022-07-08 09:29:26.527 | INFO | dcs.tests.user_request_handler:report_state:22 - [RESPONSE] report free: success marked 62630b238efeddc07694a7def5884fba8fb7cc29 +2022-07-08 09:29:26.575 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.241', 56449): {'report_free': 'success marked 62630b238efeddc07694a7def5884fba8fb7cc29', 'type': 'report_free'} +2022-07-08 09:29:27.429 | INFO | dcs.tests.spider_task:run:146 - [REMOTE] free nodes: [['192.168.43.241', 9000], ['192.168.43.241', 9001], ['192.168.43.241', 9002]] +2022-07-08 09:29:27.429 | INFO | dcs.tests.spider_task:compose_result:124 - [COMPOSE] composing task... +2022-07-08 09:29:28.216 | INFO | dcs.tests.spider_task:compose_result:131 - [RESULT] [('赵润州', '军事医学科学院', '领域:特种医学、军事医学与卫生、自动化技术', '从美国博德研究所成功之道看生命科学前沿创新'), ('刘术', '军事医学科学院', '领域:特种医学、军事医学与卫生、军事', '从美国博德研究所成功之道看生命科学前沿创新'), ('房媛', '陕西服装工程学院', '领域:有机化工、高等教育、化学', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('董林娟', '陕西服装工程学院', '领域:中药学、高等教育、医学教育与医学边缘学科', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('石钰', '陕西服装工程学院', '领域:高等教育、医学教育与医学边缘学科、中药学', '浅析茶文化在生命科学概论课程思政教学中的应用和结合方法'), ('田艳艳', '国家自然科学基金委员会生命科学部', '领域:生物学、基础医学、医学教育与医学边缘学科', '2021年度生命科学部基金项目评审工作综述'), ('赵海铭', '国家自然科学基金委员会生命科学部', '领域:生物学、化学、有机化工', '2021年度生命科学部基金项目评审工作综述'), ('朱孟娟', '国家自然科学基金委员会生命科学部', '领域:自然科学理论与方法', '2021年度生命科学部基金项目评审工作综述'), ('李亮', '河北师范大学汇华学院', '领域:中等教育、高等教育、人口学与计划生育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('段婷娟', '', '领域:中等教育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('穆旭同', '', '领域:中等教育', '基于重大疫情防控体制建设要求的中小学生命科学教育研究'), ('房媛', '陕西服装工程学院', '领域:有机化工、高等教育、化学', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('董林娟', '陕西服装工程学院', '领域:中药学、高等教育、医学教育与医学边缘学科', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('石钰', '陕西服装工程学院', '领域:高等教育、医学教育与医学边缘学科、中药学', '生命科学概论课程思政教学中结合茶文化的创新策略'), ('罗梓超', '北京市科学技术情报研究所', '领域:信息经济与邮政经济、工业经济、科学研究管理', '中美生命科学科研现状对比研究'), ('李荣', '北京市科学技术情报研究所', '领域:图书情报与数字图书馆、科学研究管理、工业经济', '中美生命科学科研现状对比研究'), ('董晓晴', '北京市科学技术情报研究所', '领域:科学研究管理、图书情报与数字图书馆、互联网技术', '中美生命科学科研现状对比研究'), ('杨淑萍', '石河子大学', '领域:生物学、中等教育、初等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('郝渊博', '石河子大学', '领域:初等教育、中等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('金冬桂', '石河子大学', '领域:中等教育、初等教育', '中美小学科学课程标准“生命科学领域”内容的比较研究'), ('王郅媛', '北京市科学仪器装备协作服务中心', '领域:轻工业手工业、园艺、生物学', '生命科学仪器现状及北京支持方向建议'), ('杨鹏宇', '北京市科学仪器装备协作服务中心', '领域:仪器仪表工业、建筑科学与工程、矿业工程', '生命科学仪器现状及北京支持方向建议'), ('解静', '北京市科学仪器装备协作服务中心', '领域:工业经济、仪器仪表工业、矿业工程', '生命科学仪器现状及北京支持方向建议'), ('覃香香', '广西壮族自治区中国科学院广西植物研究所', '领域:轻工业手工业、有机化工、一般化学工业', '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'), ('周玉恒', '中国科学院广西植物研究所', '领域:轻工业手工业、有机化工、化学', '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'), ('陈海珊', '中国科学院广西植物研究所', '领域:有机化工、轻工业手工业、植物保护', '生物脱毒改善蔗渣水解物木糖醇发酵性能的研究'), ('李亚红', '天津市海水淡化与综合利用研究所', '领域:环境科学与资源利用、海洋学、无机化工', '聚合物类阻垢剂在海水中的可生物降解性'), ('赵小芳', '国家海洋局天津海水淡化与综合利用研究所', '领域:环境科学与资源利用、海洋学、无机化工', '聚合物类阻垢剂在海水中的可生物降解性'), ('周筝', '天津市海水淡化与综合利用研究所', '领域:环境科学与资源利用、海洋学、无机化工', '聚合物类阻垢剂在海水中的可生物降解性'), ('何义', '桂林医学院', '领域:医学教育与医学边缘学科、药学、高等教育', '病原微生物实验室生物安全管理探讨'), ('吴丹', '桂林医学院', '领域:畜牧与动物医学、药学、医学教育与医学边缘学科', '病原微生物实验室生物安全管理探讨'), ('蒋莲秀', '桂林医学院', '领域:药学、农业基础科学、医学教育与医学边缘学科', '病原微生物实验室生物安全管理探讨'), ('高尚志', '吉林农业大学', '领域:农业基础科学、农艺学', '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'), ('刘日月', '吉林农业大学', '领域:农业基础科学、农艺学、中药学', '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'), ('窦森', '吉林农业大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '不同施量生物炭对土壤团聚体及其密度组分中有机碳含量的影响'), ('王萍', '重庆科技学院', '领域:地质学、石油天然气工业、海洋学', '志留纪生物礁研究进展:分布、演替及发育过程'), ('谭先锋', '重庆科技学院', '领域:地质学、石油天然气工业、高等教育', '志留纪生物礁研究进展:分布、演替及发育过程'), ('王佳', '重庆科技学院', '领域:地质学、石油天然气工业、高等教育', '志留纪生物礁研究进展:分布、演替及发育过程'), ('李荭荭', '福建农林大学', '领域:环境科学与资源利用、农作物、生物学', '生物炭对铜污染土壤的修复及水稻Cu累积的影响'), ('赵明柳', '福建农林大学', '领域:环境科学与资源利用、农作物', '生物炭对铜污染土壤的修复及水稻Cu累积的影响'), ('董海霞', '福建农林大学', '领域:环境科学与资源利用、农作物', '生物炭对铜污染土壤的修复及水稻Cu累积的影响'), ('邓欢', '长春科技学院', '领域:环境科学与资源利用、农业基础科学、高等教育', '褐煤提质废水生物处理系统启动期菌群结构动态变化'), ('陆海', '吉林建筑大学', '领域:环境科学与资源利用、建筑科学与工程、工业通用技术及设备', '褐煤提质废水生物处理系统启动期菌群结构动态变化'), ('张小雨', '吉林建筑大学', '领域:环境科学与资源利用、建筑科学与工程、预防医学与卫生学', '褐煤提质废水生物处理系统启动期菌群结构动态变化'), ('范阜东', '南京大学医学院附属鼓楼医院', '领域:外科学、心血管系统疾病、生物医学工程', '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'), ('汤鑫龙', '南京大学医学院附属鼓楼医院', '领域:心血管系统疾病、中药学、外科学', '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'), ('周庆', '南京大学医学院附属鼓楼医院', '领域:外科学、心血管系统疾病、生物医学工程', '50~65岁二尖瓣患者机械瓣与生物瓣植入术后临床疗效对比:倾向性评分匹配研究'), ('刘丽婷', '陕西煤业化工技术研究院有限责任公司', '领域:燃料化工、有机化工、化学', 'XPS表面分析技术在生物医用金属材料研究中的应用'), ('王岩', '北京自动化控制设备研究所', '领域:航空航天科学与工程、仪器仪表工业、武器工业与军事技术', 'XPS表面分析技术在生物医用金属材料研究中的应用'), ('李怡雪', '西北工业大学', '领域:生物医学工程、金属学及金属工艺', 'XPS表面分析技术在生物医用金属材料研究中的应用'), ('周尚', '中国海洋大学', '领域:海洋学、地质学', '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'), ('徐继尚', '中国海洋大学', '领域:海洋学、地质学、材料科学', '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'), ('刘勇', '中国海洋大学', '领域:海洋学、地质学、贸易经济', '西太暖池区生物组分对海底表层沉积物物理力学性质的影响'), ('张洁', '新疆环境保护科学研究院', '领域:环境科学与资源利用、农业基础科学、农艺学', '生物炭修复石油烃及多环芳烃污染土壤的研究进展'), ('王健', '路易斯安那州立大学', '领域:环境科学与资源利用', '生物炭修复石油烃及多环芳烃污染土壤的研究进展'), ('俞音', '新疆环境保护科学研究院', '领域:环境科学与资源利用、石油天然气工业、农业经济', '生物炭修复石油烃及多环芳烃污染土壤的研究进展'), ('于亚楠', '南京农业大学', '领域:农业基础科学、农艺学、园艺', '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'), ('邬海燕', '南京农业大学', '领域:生物学、农业基础科学、农艺学', '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'), ('王盼星', '南京农业大学', '领域:农业基础科学、农艺学、园艺', '木霉生物有机肥应用于滨海盐土甘蓝种植的生物效应'), ('党晓宏', '内蒙古农业大学', '领域:林业、生物学、农业基础科学', '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'), ('刘阳', '内蒙古水利科学研究院', '领域:林业、农业基础科学、农艺学', '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'), ('蒙仲举', '内蒙古农业大学', '领域:农业基础科学、畜牧与动物医学、农艺学', '毛乌素沙地采煤沉陷区地表生物结皮土壤碳排放对水热因子变化的响应'), ('袁根', '南京林业大学', '领域:环境科学与资源利用', '生物炭对施用沼液稻田土壤重金属生物有效性的影响'), ('汤逸帆', '南京林业大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '生物炭对施用沼液稻田土壤重金属生物有效性的影响'), ('申建华', '中粮肉食(江苏)有限公司', '领域:农业基础科学、农艺学、环境科学与资源利用', '生物炭对施用沼液稻田土壤重金属生物有效性的影响'), ('高占斌', '集美大学', '领域:船舶工业、动力工程、机械工业', '相继增压柴油机掺混生物柴油燃烧的性能影响研究'), ('王彬彬', '集美大学', '领域:船舶工业、动力工程', '相继增压柴油机掺混生物柴油燃烧的性能影响研究'), ('高敬博', '集美大学', '领域:船舶工业、动力工程', '相继增压柴油机掺混生物柴油燃烧的性能影响研究'), ('白嘉骏', '吉林农业大学', '领域:农业基础科学、农艺学', '田间自然陈化生物炭组成特征及对黑土有机碳的影响'), ('刘松健', '吉林工程技术师范学院', '领域:农业基础科学、农艺学', '田间自然陈化生物炭组成特征及对黑土有机碳的影响'), ('窦森', '吉林农业大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '田间自然陈化生物炭组成特征及对黑土有机碳的影响'), ('郭琦', '西北农林科技大学', '领域:农艺学、农业基础科学、生物学', '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'), ('卜崇峰', '中国科学院水利部水土保持研究所', '领域:农业基础科学、农艺学、生物学', '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'), ('李宜坪', '西北农林科技大学', '领域:农业基础科学、农艺学、环境科学与资源利用', '区域尺度生物结皮下伏土壤养分的空间分布特征——以毛乌素沙地为例'), ('贾娜', '解放军91550部队', '领域:电信技术、计算机软件及计算机应用、自动化技术', '基于光电测量技术的光学元件表面缺陷自动识别方法研究'), ('周媛媛', '重庆师范大学涉外商贸学院', '领域:计算机软件及计算机应用、自动化技术', '基于深度学习理论的光学分子成像图像重建方法'), ('王杨丽', '重庆师范大学涉外商贸学院', '领域:高等教育、计算机软件及计算机应用、自动化技术', '基于深度学习理论的光学分子成像图像重建方法'), ('易仕和', '国防科学技术大学', '领域:航空航天科学与工程、力学、物理学', '适用高超声速飞行环境的超声速气膜冷却光学窗口研究进展'), ('丁浩林', '国防科学技术大学', '领域:武器工业与军事技术、航空航天科学与工程、力学', '适用高超声速飞行环境的超声速气膜冷却光学窗口研究进展'), ('李卓', '解放军91404部队', '领域:无线电电子学、航空航天科学与工程、仪器仪表工业', '3.7~4.8μm红外二次成像折反射式光学系统设计'), ('叶宗民', '解放军91404部队', '领域:无线电电子学、武器工业与军事技术、计算机软件及计算机应用', '3.7~4.8μm红外二次成像折反射式光学系统设计'), ('孙保杰', '解放军91404部队', '领域:电信技术、武器工业与军事技术、仪器仪表工业', '3.7~4.8μm红外二次成像折反射式光学系统设计'), ('张璐', '华北光电技术研究所', '领域:无线电电子学、仪器仪表工业、金属学及金属工艺', '红外探测器集成光学系统低温评价方法研究'), ('张磊', '华北光电技术研究所', '领域:无线电电子学、仪器仪表工业、金属学及金属工艺', '红外探测器集成光学系统低温评价方法研究'), ('付志凯', '华北光电技术研究所', '领域:无线电电子学、仪器仪表工业、电力工业', '红外探测器集成光学系统低温评价方法研究'), ('罗辉', '武汉工程大学', '领域:电信技术、无线电电子学', '近地层紫外通信收/发一体光学系统技术研究'), ('李杰', '武汉工程大学', '领域:无线电电子学、电信技术、航空航天科学与工程', '近地层紫外通信收/发一体光学系统技术研究'), ('李金铖', '武汉工程大学', '领域:电信技术、无线电电子学', '近地层紫外通信收/发一体光学系统技术研究'), ('李江勇', '华北光电技术研究所', '领域:仪器仪表工业、无线电电子学、计算机软件及计算机应用', '基于全局性优化的极简光学系统设计'), ('吴晓琴', '西安电子科技大学', '领域:计算机软件及计算机应用、物理学、无线电电子学', '基于全局性优化的极简光学系统设计'), ('刘飞', '西安电子科技大学', '领域:计算机软件及计算机应用、物理学、无线电电子学', '基于全局性优化的极简光学系统设计'), ('李小燕', '华侨大学', '领域:仪器仪表工业、物理学、无线电电子学', '基于线上线下混合模式的工程光学综合实验平台的建设研究'), ('任洪亮', '华侨大学', '领域:物理学、仪器仪表工业、无线电电子学', '基于线上线下混合模式的工程光学综合实验平台的建设研究'), ('张奚宁', '华侨大学', '领域:物理学、无线电电子学、仪器仪表工业', '基于线上线下混合模式的工程光学综合实验平台的建设研究'), ('梁静远', '西安理工大学', '领域:电信技术、无线电电子学', '自由空间光通信系统光学天线技术研究进展'), ('亢维龙', '西安理工大学', '领域:电信技术', '自由空间光通信系统光学天线技术研究进展'), ('董壮', '西安理工大学', '领域:电信技术', '自由空间光通信系统光学天线技术研究进展'), ('苏春轩', '中国科学院光电技术研究所', '领域:物理学、无线电电子学、自动化技术', '基于波前传感器标定优化的自适应光学校正方法'), ('董理治', '中国科学院光电技术研究所', '领域:物理学、仪器仪表工业、无线电电子学', '基于波前传感器标定优化的自适应光学校正方法'), ('樊新龙', '中国科学院光电技术研究所', '领域:仪器仪表工业、天文学、物理学', '基于波前传感器标定优化的自适应光学校正方法'), ('孟庆宇', '中国科学院长春光学精密机械与物理研究所', '领域:仪器仪表工业、航空航天科学与工程、天文学', '三镜反射式光学系统综述'), ('毛玉林', '北京敏视达雷达有限公司', '领域:电信技术', '激光通信与成像卡式收发光学天线结构初解'), ('舒仕江', '北京敏视达雷达有限公司', '领域:电信技术、仪器仪表工业、气象学', '激光通信与成像卡式收发光学天线结构初解'), ('吴艳锋', '北京敏视达雷达有限公司', '领域:电信技术、气象学、无线电电子学', '激光通信与成像卡式收发光学天线结构初解'), ('曹钟予', '长春理工大学', '领域:仪器仪表工业、电信技术、临床医学', '长工作距的3D变倍外视镜光学系统设计'), ('向阳', '长春理工大学', '领域:仪器仪表工业、无线电电子学、物理学', '长工作距的3D变倍外视镜光学系统设计'), ('尹爱萍', '忻州师范学院', '领域:化学、高等教育、轻工业手工业', '三联噻吩基查尔酮衍生物的线性光学性质和超快非线性光学响应'), ('孙金鱼', '忻州师范学院', '领域:化学、有机化工、材料科学', '三联噻吩基查尔酮衍生物的线性光学性质和超快非线性光学响应'), ('石玉芳', '忻州师范学院', '领域:化学、有机化工、材料科学', '三联噻吩基查尔酮衍生物的线性光学性质和超快非线性光学响应'), ('王天明', '电子科技大学', '领域:物理学、仪器仪表工业、无线电电子学', '高功率激光作用下光学元件非线性热效应研究'), ('李斌成', '电子科技大学', '领域:仪器仪表工业、物理学、无线电电子学', '高功率激光作用下光学元件非线性热效应研究'), ('赵斌兴', '电子科技大学', '领域:仪器仪表工业、材料科学、物理学', '高功率激光作用下光学元件非线性热效应研究'), ('曾晨欣', '苏州大学', '领域:仪器仪表工业、计算机软件及计算机应用、航空航天科学与工程', '超轻小宽视场高分辨无人机机载相机光学系统设计'), ('李加慧', '苏州大学', '领域:仪器仪表工业、工业通用技术及设备、航空航天科学与工程', '超轻小宽视场高分辨无人机机载相机光学系统设计'), ('谭奋利', '苏州大学', '领域:仪器仪表工业、计算机软件及计算机应用、航空航天科学与工程', '超轻小宽视场高分辨无人机机载相机光学系统设计'), ('隋博', '长春理工大学', '领域:物理学、仪器仪表工业', '红外衍射光学模芯的超精密车削工艺与优化'), ('霍富荣', '长春理工大学', '领域:计算机软件及计算机应用、物理学、武器工业与军事技术', '红外衍射光学模芯的超精密车削工艺与优化'), ('李闯', '长春理工大学', '领域:仪器仪表工业、物理学、工业通用技术及设备', '红外衍射光学模芯的超精密车削工艺与优化'), ('侯灿', '安徽省气象科学研究所', '领域:环境科学与资源利用、气象学、农业基础科学', '基于长期观测的淮河流域农田背景区灰霾污染气溶胶光学特性和类型分析'), ('黄勇', '安徽省气象科学研究所', '领域:气象学、环境科学与资源利用、农业基础科学', '基于长期观测的淮河流域农田背景区灰霾污染气溶胶光学特性和类型分析'), ('吴文玉', '中国气象局', '领域:气象学、农业基础科学、环境科学与资源利用', '基于长期观测的淮河流域农田背景区灰霾污染气溶胶光学特性和类型分析'), ('张凯胜', '中国科学院西安光学精密机械研究所', '领域:仪器仪表工业、金属学及金属工艺、电信技术', '大相对孔径全天时星敏感器光学系统'), ('苏秀琴', '青岛海洋科学与技术国家实验室', '领域:计算机软件及计算机应用、电信技术、仪器仪表工业', '大相对孔径全天时星敏感器光学系统'), ('叶志龙', '上海航天控制工程研究所', '领域:仪器仪表工业、航空航天科学与工程、电信技术', '大相对孔径全天时星敏感器光学系统'), ('谭振坤', '西安工业大学', '领域:电信技术、仪器仪表工业、无线电电子学', '双光学频率梳的多波长外差干涉测距方法研究'), ('李瑶', '西安工业大学', '领域:武器工业与军事技术、物理学、无线电电子学', '双光学频率梳的多波长外差干涉测距方法研究'), ('孔英秀', '西安工业大学', '领域:电信技术、电力工业、工业通用技术及设备', '双光学频率梳的多波长外差干涉测距方法研究'), ('程云', '南开大学', '领域:旅游、安全科学与灾害防治、企业经济', '新冠肺炎疫情是否激发了康养旅游意愿?——一个条件过程模型的检验'), ('殷杰', '华侨大学', '领域:旅游、贸易经济、服务业经济', '新冠肺炎疫情是否激发了康养旅游意愿?——一个条件过程模型的检验'), ('梁喜', '重庆交通大学', '领域:企业经济、宏观经济管理与可持续发展、交通运输经济', '政府动态奖惩机制下重大疫情防控演化博弈研究'), ('陈清卿', '重庆交通大学', '领域:预防医学与卫生学、行政学及国家行政管理', '政府动态奖惩机制下重大疫情防控演化博弈研究'), ('王俊', '青岛医学院', '领域:医药卫生方针政策与法律法规研究、中药学', '我校大学生对新冠肺炎疫情的认知及心理行为调查'), ('王帅', '青岛大学', '领域:医药卫生方针政策与法律法规研究、儿科学、肿瘤学', '我校大学生对新冠肺炎疫情的认知及心理行为调查'), ('秦倪', '青岛大学', '领域:医药卫生方针政策与法律法规研究、肿瘤学、呼吸系统疾病', '我校大学生对新冠肺炎疫情的认知及心理行为调查'), ('彭财伟', '浙江省湖州市南浔区疾病预防控制中心', '领域:生物学、预防医学与卫生学、基础医学', '湖州市南浔区某学校一起水痘疫情流行病学调查'), ('杨丽萍', '浙江省湖州市南浔区疾病预防控制中心', '领域:感染性疾病及传染病、预防医学与卫生学、消化系统疾病', '湖州市南浔区某学校一起水痘疫情流行病学调查'), ('刘彬辉', '浙江省湖州市南浔区疾病预防控制中心', '领域:预防医学与卫生学、感染性疾病及传染病、医药卫生方针政策与法律法规研究', '湖州市南浔区某学校一起水痘疫情流行病学调查'), ('金银川', '空军军医大学', '领域:医学教育与医学边缘学科、精神病学、高等教育', '民众对新型冠状病毒肺炎疫情的风险认知、心理状态与行为变化的关系研究:心理弹性的中介作用'), ('郭亚宁', '空军军医大学', '领域:基础医学、轻工业手工业、汽车工业', '民众对新型冠状病毒肺炎疫情的风险认知、心理状态与行为变化的关系研究:心理弹性的中介作用'), ('时勘', '温州大学', '领域:心理学、企业经济、管理学', '民众对新型冠状病毒肺炎疫情的风险认知、心理状态与行为变化的关系研究:心理弹性的中介作用'), ('黄少安', '山东大学', '领域:经济理论及经济思想史、经济体制改革、企业经济', '后疫情时期“疫情产业”转型升级问题研究'), ('李少星', '山东大学', '领域:经济体制改革、宏观经济管理与可持续发展、建筑科学与工程', '后疫情时期“疫情产业”转型升级问题研究'), ('汪意成', '北京大学', '领域:经济体制改革', '后疫情时期“疫情产业”转型升级问题研究'), ('江南', '解放军信息工程大学', '领域:自然地理学和测绘学、计算机软件及计算机应用、电力工业', '每日疫情电子地图的设计与制作'), ('郭玮', '解放军61206部队', '领域:自然地理学和测绘学、计算机软件及计算机应用、地理', '每日疫情电子地图的设计与制作'), ('滕俊磊', '中共湖南省娄底市委党校', '领域:行政学及国家行政管理、计算机软件及计算机应用、农业经济', '后疫情时代街头官僚行政逻辑转变:一个分析框架'), ('田甜', '中共湖南省娄底市委党校', '领域:行政学及国家行政管理', '后疫情时代街头官僚行政逻辑转变:一个分析框架'), ('陈凤娇', '东北财经大学', '领域:预防医学与卫生学', '重大传染病多渠道疫情信息发布模式的演化路径分析'), ('刘德海', '东北财经大学', '领域:宏观经济管理与可持续发展、数学、行政学及国家行政管理', '重大传染病多渠道疫情信息发布模式的演化路径分析'), ('周琴', '广州市疾病预防控制中心', '领域:肿瘤学、预防医学与卫生学、医药卫生方针政策与法律法规研究', '2020年新型冠状病毒肺炎疫情对广州市法定报告传染病的影响研究'), ('李海麟', '广州市疾病预防控制中心', '领域:预防医学与卫生学、轻工业手工业、感染性疾病及传染病', '2020年新型冠状病毒肺炎疫情对广州市法定报告传染病的影响研究'), ('刘远', '广州市疾病预防控制中心', '领域:预防医学与卫生学、感染性疾病及传染病、医药卫生方针政策与法律法规研究', '2020年新型冠状病毒肺炎疫情对广州市法定报告传染病的影响研究'), ('丁若时', '宁波图书馆', '领域:图书情报与数字图书馆、新闻与传媒、中国近现代史', '基于数据可视化与词频分析的后疫情时代网借服务研究——以“天一约书”为例'), ('毛婕', '浙江省宁波市图书馆', '领域:图书情报与数字图书馆', '基于数据可视化与词频分析的后疫情时代网借服务研究——以“天一约书”为例'), ('胡冰迎彦', '浙江省宁波市图书馆', '领域:图书情报与数字图书馆、计算机软件及计算机应用', '基于数据可视化与词频分析的后疫情时代网借服务研究——以“天一约书”为例'), ('唐勇', '西华师范大学', '领域:中国共产党、行政学及国家行政管理、政党及群众组织', '重大疫情防控中青年志愿服务的价值意蕴及路径优化'), ('陈海', '西南大学', '领域:轻工业手工业、材料科学、高等教育', '后疫情时代下基于虚拟仿真技术提升食品科学与工程专业教学质量的探讨'), ('朱瀚昆', '西南大学', '领域:轻工业手工业、有机化工、高等教育', '后疫情时代下基于虚拟仿真技术提升食品科学与工程专业教学质量的探讨'), ('戴宏杰', '西南大学', '领域:轻工业手工业、有机化工、化学', '后疫情时代下基于虚拟仿真技术提升食品科学与工程专业教学质量的探讨'), ('鲍昕', '南京邮电大学', '领域:预防医学与卫生学、自动化技术', '基于时空注意力机制的新冠疫情预测模型'), ('谭智一', '南京邮电大学', '领域:电信技术、预防医学与卫生学、自动化技术', '基于时空注意力机制的新冠疫情预测模型'), ('鲍秉坤', '南京邮电大学', '领域:计算机软件及计算机应用、自动化技术、汽车工业', '基于时空注意力机制的新冠疫情预测模型'), ('陈昱帆', '河南农业大学', '领域:市场研究与信息、农业经济、畜牧与动物医学', '生猪疫情变动对猪肉价格的冲击效应与溢出效应研究'), ('花俊国', '河南农业大学', '领域:农业经济、畜牧与动物医学、工业经济', '生猪疫情变动对猪肉价格的冲击效应与溢出效应研究'), ('张俊华', '中国农业大学', '领域:农业经济、市场研究与信息、畜牧与动物医学', '生猪疫情变动对猪肉价格的冲击效应与溢出效应研究'), ('汪越', '南京理工大学', '领域:数学、预防医学与卫生学', '数据驱动的突发疫情传染扩散参数动态更新策略'), ('刘明', '南京理工大学', '领域:宏观经济管理与可持续发展、自动化技术、交通运输经济', '数据驱动的突发疫情传染扩散参数动态更新策略'), ('曹杰', '徐州工程学院', '领域:宏观经济管理与可持续发展、计算机软件及计算机应用、环境科学与资源利用', '数据驱动的突发疫情传染扩散参数动态更新策略'), ('李美琪', '中国农业科学院农业信息研究所', '领域:农业经济、市场研究与信息、经济体制改革', '非洲猪瘟疫情对我国肉类价格影响的区域异质性研究'), ('季勇', '中国农业科学院', '领域:畜牧与动物医学、农业经济、人才学与劳动科学', '非洲猪瘟疫情对我国肉类价格影响的区域异质性研究'), ('胡晨沛', '国家发展和改革委员会国际合作司', '领域:经济体制改革、农业经济、宏观经济管理与可持续发展', '非洲猪瘟疫情对我国肉类价格影响的区域异质性研究')] +2022-07-08 09:29:28.231 | INFO | dcs.tests.spider_task:compose_result:132 - [DATABASE] writing crawl results to database... +2022-07-08 09:29:28.231 | INFO | dcs.tools.database:write_results2database:203 - [DATABASE] writing 4st crawl results to table wfy_crawl_result in database... +2022-07-08 09:29:31.025 | INFO | dcs.tools.database:write_results2database:212 - [DATABASE] writing successful of 4st crawl results! +2022-07-08 09:29:31.626 | INFO | dcs.communicate:run:28 - [COMMUNICATE] sending response to ('192.168.43.64', 60151): {'crawl_id': 4, 'table_name': 'wfy_crawl_result', 'type': 'response'} +2022-07-08 09:29:31.816 | INFO | dcs.tests.requestHandler:run:27 - [REQUEST] end: communication over from ('192.168.43.64', 60151)! diff --git a/dcs/tests/fastcrawler.py b/dcs/tests/fastcrawler.py index cf78024..86be0c8 100644 --- a/dcs/tests/fastcrawler.py +++ b/dcs/tests/fastcrawler.py @@ -1,26 +1,90 @@ import threading from collections import deque - import bs4 -from dcs.tests.zhiwang import * +# 定义论文类 +import requests +from loguru import logger + + +class Paper: + def __init__(self, title, authors): + self.title = title + self.authors = authors + + def __str__(self): + s = f'title: {self.title}\n' + for i in self.authors: + s += f'author: {i}\n' + return s + + +# 定义作者类 +class Author: + def __init__(self, name, college, major): + self.name = name + self.college = college + self.major = major -class Crawler: + def __str__(self): + return f'{self.name}, {self.college}, {self.major}' + + +class Fast_crawler: def __init__(self): - self.url = 'https://kns.cnki.net/kns8/Brief/GetGridTableHtml' - self.url = 'https://kns.cnki.net/kns8/Group/Result' self.url = 'https://wap.cnki.net/touch/web/Article/Search' self.headers = { 'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/103.0.5060.114 Safari/537.36 Edg/103.0.1264.49'} self.cookies = 'Ecp_ClientId=1220704081600243712; Ecp_loginuserbk=wh0302; knsLeftGroupSelectItem=1;2;; Ecp_ClientIp=202.197.9.22; SID_sug=126002; _pk_ses=*; Ecp_IpLoginFail=220708116.162.2.165; _pk_id=6f3fe3b8-fcc4-4111-ad5f-c2f8aba3a0e3.1656893782.2.1657209667.1657209661.; ASP.NET_SessionId=uppv4o3sgpf45j1lmsc4ogin; SID_kns8=015123157; dblang=ch' - def get_search_html(self): + def get_search_html(self, word, index): params = { - 'searchtype': 0, - 'fieldtype': 101, - 'keyword': 'computer' + "searchtype": "0", + "dbtype": "", + "pageindex": index, + "pagesize": "10", + "ispart": "False", + "theme_kw": "", + "title_kw": "", + "full_kw": "", + "author_kw": "", + "depart_kw": "", + "key_kw": "", + "abstract_kw": "", + "source_kw": "", + "teacher_md": "", + "catalog_md": "", + "depart_md": "", + "refer_md": "", + "name_meet": "", + "collect_meet": "", + "keyword": word, + "remark": "", + "fieldtype": "101", + "sorttype": "0", + "articletype": "-1", + "yeartype": "0", + "yearinterval": "", + "screentype": "0", + "isscreen": "", + "subject_sc": "", + "research_sc": "", + "depart_sc": "", + "sponsor_sc": "", + "author_sc": "", + "teacher_sc": "", + "subjectcode_sc": "", + "researchcode_sc": "", + "departcode_sc": "", + "sponsorcode_sc": "", + "authorcode_sc": "", + "teachercode_sc": "", + "starttime_sc": "", + "endtime_sc": "", + "timestate_sc": "" } + self.headers.update({'X-Requested-With': 'XMLHttpRequest'}) res = requests.post(self.url, data=params, headers=self.headers) if res.status_code == 200: @@ -28,7 +92,7 @@ class Crawler: return soup def get_html_by_link(self, link): - logger.debug(link) + # logger.debug(link) res = requests.get('https:' + link, headers=self.headers) if res.status_code == 200: soup = bs4.BeautifulSoup(res.text, 'html.parser') @@ -48,17 +112,19 @@ class Crawler: title = soup.find('div', class_='c-card__title2').text.strip() authors = soup.find('div', class_='c-card__author') - if '\x20' in authors.text: + authors_links = [i.attrs['href'] for i in authors.find_all('a')] + authors_links_pcd = [i for i in authors_links if i != 'javascript:void(0);'] + if len(authors_links_pcd) == 0: + logger.warning('[PARSE] paper parser can not find authors info!') res.append(Paper(title, [Author(None, None, None)])) return - authors_links = [i.attrs['href'] for i in authors.find_all('a')] authors_list = [] - for i in authors_links: - if i == 'javascript:void(0);': - continue - authors_list.append(self.parse_author_html(self.get_html_by_link(i))) + for i in authors_links_pcd: + author_result = self.parse_author_html(self.get_html_by_link(i)) + if author_result: + authors_list.append(author_result) - res.append(Paper(title, authors)) + res.append(Paper(title, authors_list)) @staticmethod def parse_author_html(soup: bs4.BeautifulSoup): @@ -66,19 +132,19 @@ class Crawler: name = soup.find('div', class_='zz-middle-name-text').text.strip() college = soup.find('div', class_='zz-middle-company').text.strip() major = soup.find('div', class_='zz-info-chart').find('span').text.strip() - # print(name) - # print(college) - # print(major) except AttributeError: - name = soup.find('div', class_='c-nav__item c-nav__title').text.strip() - college = None - major = None + # logger.warning(f'[PARSE] author parser can not find personal info') + # name = soup.find('div', class_='c-nav__item c-nav__title').text.strip() + # college = None + # major = None + # 这是机构信息,在作者详细信息里面有, 暂时不爬 + return None return Author(name, college, major) - def crawl(self): - sh = self.get_search_html() + def crawl(self, word, index): + sh = self.get_search_html(word, index) pl = self.get_paper_links(sh) - res = deque() + res: deque[Paper] = deque() threads = [] for p in pl: if p == 'javascript:void(0);': @@ -86,13 +152,14 @@ class Crawler: p = self.get_html_by_link(p) t = threading.Thread(target=self.parse_paper_html, args=(p, res,)) threads.append(t) + # break [t.start() for t in threads] [t.join() for t in threads] return res if __name__ == '__main__': - crawler = Crawler() - data = crawler.crawl() + crawler = Fast_crawler() + data = crawler.crawl('computer', 1) for r in data: print(r) diff --git a/dcs/tests/spider_task.py b/dcs/tests/spider_task.py index b4eda24..343b1d4 100644 --- a/dcs/tests/spider_task.py +++ b/dcs/tests/spider_task.py @@ -1,14 +1,10 @@ import random import socket -import threading from time import sleep from typing import Optional -from msedge.selenium_tools import Edge -from msedge.selenium_tools import EdgeOptions - from conf.config import global_var, get_free_addresses, get_crawl_result, get_by_cookie, set_state_client -from dcs.tests.zhiwang import * +from dcs.tests.fastcrawler import * from dcs.tools.database import get_last_crawl_id, create_crawl_result_table from dcs.tools.database import write_results2database @@ -25,39 +21,19 @@ class Crawler(threading.Thread): self.partial_task = partial_task self.last_crawl_id = last_crawl_id self.results = results - self.edge_driver_path = dict(global_var.configs.items('crawler'))['edge_driver_path'] def crawl_zhiwang(self, user_name=None): - edge_options = EdgeOptions() - edge_options.use_chromium = True - edge_options.add_argument('--headless') - No_Image_loading = {"profile.managed_default_content_settings.images": 2, 'permissions.default.stylesheet': 2} - edge_options.add_experimental_option("prefs", No_Image_loading) - driver = Edge(options=edge_options, executable_path=self.edge_driver_path) - soup = driver_open(driver, self.partial_task.word) # 搜索word - - papers = [] # 用于保存爬取到的论文 + logger.info(f'[CRAWLER] local crawler is starting...') table_name = f'{user_name}_crawl_result' create_crawl_result_table(table_name=table_name) self.partial_task.crawl_id = self.last_crawl_id + 1 - paper_id = 0 - - # 爬取第一篇 - if self.partial_task.pages_start == 1: - spider(driver, soup, papers) - self.partial_task.pages_start += 1 - while paper_id < len(papers): - write2results(papers[paper_id], results=self.results) - paper_id += 1 + fast_crawler = Fast_crawler() while self.partial_task.pages_start < self.partial_task.pages_end: - content = change_page(driver, self.partial_task.pages_start) - spider(driver, content, papers) - while paper_id < len(papers): - write2results(papers[paper_id], results=self.results) - paper_id += 1 + papers = fast_crawler.crawl(self.partial_task.word, self.partial_task.pages_start) + for paper in papers: + write2results(paper, results=self.results) self.partial_task.pages_start += 1 - driver.close() def test_simulation(self, user_name): table_name = f'{user_name}_crawl_result' @@ -78,8 +54,8 @@ class Crawler(threading.Thread): def run(self) -> None: try: - # self.crawl_zhiwang(user_name=self.partial_task.cui.user_name) - self.test_simulation(user_name=self.partial_task.cui.user_name) + self.crawl_zhiwang(user_name=self.partial_task.cui.user_name) + # self.test_simulation(user_name=self.partial_task.cui.user_name) except Exception as e: logger.error(f'[ERROR] {str(e)}') finally: @@ -185,16 +161,16 @@ class Spider_task(threading.Thread): self.free_remote_nodes.remove(f_node) break else: - logger.warning(f'[TASK] generate failed, no free remote nodes! spider task {task.request_map} is at state waiting...') + logger.warning(f'[TASK] generate remote task failed, no free remote nodes! spider task {task.request_map} is at state waiting...') logger.info(f'[TASK] generating local task {task.request_map}') if global_var.spider.crawlers >= global_var.spider.max_count_of_crawlers: - logger.warning(f'[TASK] generate failed, crawlers exceed! spider task {task.request_map} is at state waiting...') + logger.warning(f'[TASK] generate local task failed, crawlers exceed! spider task {task.request_map} is at state waiting...') break else: - crawler = Crawler(task, self.last_crawl_id, self.results) - task.thread = crawler + _crawler = Crawler(task, self.last_crawl_id, self.results) + task.thread = _crawler task.task_type = 'local' - crawler.start() + _crawler.start() global_var.spider.crawlers += 1 if self.is_all_task_crawled(): break diff --git a/dcs/tests/zhiwang.py b/dcs/tests/zhiwang.py index ebb47d6..91d8c0a 100644 --- a/dcs/tests/zhiwang.py +++ b/dcs/tests/zhiwang.py @@ -4,11 +4,11 @@ import time import requests from bs4 import BeautifulSoup -# 定义论文类 from loguru import logger from selenium.webdriver.common.by import By +# 定义论文类 class Paper: def __init__(self, title, authors): self.title = title diff --git a/dcs/tools/database.py b/dcs/tools/database.py index 71fa5af..616b12e 100644 --- a/dcs/tools/database.py +++ b/dcs/tools/database.py @@ -171,7 +171,7 @@ def create_table(create_sql: str): cur.close() conn.close() except Exception as e: - logger.error(f'[ERROR] {str(e)}') + logger.warning(f'[DATABASE] {str(e)}') def create_crawl_result_table(table_name: str): diff --git a/ui/result.json b/ui/result.json index 8e3a6e1..670a013 100644 --- a/ui/result.json +++ b/ui/result.json @@ -1,859 +1,5 @@ { - "crawl_id": 71, + "crawl_id": 76, "table_name": "god_crawl_result", - "data": [ - [ - "test", - "test", - "test", - "test" - ], - [ - "test", - "test", - "test", - "test" - ], - [ - "test", - "test", - "test", - "test" - ], - [ - "test", - "test", - "test", - "test" - ], - [ - "test", - "test", - "test", - "test" - ], - [ - "test", - "test", - "test", - "test" - ], - [ - "孙亚康", - null, - null, - "基于计算机视觉的预制墙板临时支撑安全合规性检查" - ], - [ - "郭红领", - "清华大学", - "建筑科学与工程;计算机软件及计算机应用;安全科学与灾害防治;", - "基于计算机视觉的预制墙板临时支撑安全合规性检查" - ], - [ - "罗柱邦", - "清华大学", - "计算机软件及计算机应用;建筑科学与工程;基础医学;", - "基于计算机视觉的预制墙板临时支撑安全合规性检查" - ], - [ - "张智慧", - "清华大学", - "环境科学与资源利用;建筑科学与工程;工业经济;", - "基于计算机视觉的预制墙板临时支撑安全合规性检查" - ], - [ - "孙亚康", - null, - null, - "基于计算机视觉的预制墙板临时支撑安全合规性检查" - ], - [ - "郭红领", - "清华大学", - "建筑科学与工程;计算机软件及计算机应用;安全科学与灾害防治;", - "基于计算机视觉的预制墙板临时支撑安全合规性检查" - ], - [ - "罗柱邦", - "清华大学", - "计算机软件及计算机应用;建筑科学与工程;基础医学;", - "基于计算机视觉的预制墙板临时支撑安全合规性检查" - ], - [ - "张智慧", - "清华大学", - "环境科学与资源利用;建筑科学与工程;工业经济;", - "基于计算机视觉的预制墙板临时支撑安全合规性检查" - ], - [ - "刘思源", - "西南大学", - "计算机硬件技术;高等教育;", - "基于大规模课程大纲数据的中美高校计算机相关课程考核的比较分析" - ], - [ - "冯蕾霖", - "西南大学", - "计算机硬件技术;", - "基于大规模课程大纲数据的中美高校计算机相关课程考核的比较分析" - ], - [ - "朱章黔", - "陆军勤务学院", - "数学;计算机硬件技术;计算机软件及计算机应用;", - "基于大规模课程大纲数据的中美高校计算机相关课程考核的比较分析" - ], - [ - "贾韬", - "西南大学", - "科学研究管理;计算机软件及计算机应用;自动化技术;", - "基于大规模课程大纲数据的中美高校计算机相关课程考核的比较分析" - ], - [ - "刘思源", - "西南大学", - "计算机硬件技术;高等教育;", - "基于大规模课程大纲数据的中美高校计算机相关课程考核的比较分析" - ], - [ - "冯蕾霖", - "西南大学", - "计算机硬件技术;", - "基于大规模课程大纲数据的中美高校计算机相关课程考核的比较分析" - ], - [ - "朱章黔", - "陆军勤务学院", - "数学;计算机硬件技术;计算机软件及计算机应用;", - "基于大规模课程大纲数据的中美高校计算机相关课程考核的比较分析" - ], - [ - "贾韬", - "西南大学", - "科学研究管理;计算机软件及计算机应用;自动化技术;", - "基于大规模课程大纲数据的中美高校计算机相关课程考核的比较分析" - ], - [ - "吴迪", - "承德医学院附属医院", - "外科学;临床医学;生物学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "司丽娜", - "承德医学院", - "基础医学;生物学;外科学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "武丽珠", - "承德市中心医院", - "外科学;心血管系统疾病;急救医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "王建华", - "承德医学院附属医院", - "外科学;计算机软件及计算机应用;基础医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "罗金伟", - "承德医学院附属医院", - "外科学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "常乾坤", - "承德医学院附属医院", - "外科学;临床医学;基础医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "吕永明", - "承德医学院附属医院", - "外科学;内分泌腺及全身性疾病;临床医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "杜元良", - "承德医学院附属医院", - "外科学;内分泌腺及全身性疾病;基础医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "吴迪", - "承德医学院附属医院", - "外科学;临床医学;生物学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "司丽娜", - "承德医学院", - "基础医学;生物学;外科学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "武丽珠", - "承德市中心医院", - "外科学;心血管系统疾病;急救医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "王建华", - "承德医学院附属医院", - "外科学;计算机软件及计算机应用;基础医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "罗金伟", - "承德医学院附属医院", - "外科学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "常乾坤", - "承德医学院附属医院", - "外科学;临床医学;基础医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "吕永明", - "承德医学院附属医院", - "外科学;内分泌腺及全身性疾病;临床医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "杜元良", - "承德医学院附属医院", - "外科学;内分泌腺及全身性疾病;基础医学;", - "3D打印技术与计算机辅助设计应用在全膝关节置换治疗重度膝关节骨关节炎中的可行性" - ], - [ - "康熙", - "中国农业大学", - "计算机软件及计算机应用;农业工程;畜牧与动物医学;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "刘刚", - "中国农业大学", - "计算机软件及计算机应用;自动化技术;农业工程;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "初梦苑", - "河北农业大学", - "计算机软件及计算机应用;畜牧与动物医学;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "李前", - "中国农业大学", - "计算机软件及计算机应用;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "王彦超", - "中国农业大学", - "计算机软件及计算机应用;畜牧与动物医学;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "康熙", - "中国农业大学", - "计算机软件及计算机应用;农业工程;畜牧与动物医学;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "刘刚", - "中国农业大学", - "计算机软件及计算机应用;自动化技术;农业工程;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "初梦苑", - "河北农业大学", - "计算机软件及计算机应用;畜牧与动物医学;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "李前", - "中国农业大学", - "计算机软件及计算机应用;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "王彦超", - "中国农业大学", - "计算机软件及计算机应用;畜牧与动物医学;", - "基于计算机视觉的奶牛生理参数监测与疾病诊断研究进展及挑战" - ], - [ - "杨骏", - "乐山师范学院", - "计算机软件及计算机应用;自动化技术;电信技术;", - "地方高校计算机专业人才工程能力培养策略" - ], - [ - "项炜", - "乐山师范学院", - "计算机软件及计算机应用;计算机硬件技术;高等教育;", - "地方高校计算机专业人才工程能力培养策略" - ], - [ - "敬思远", - "乐山师范学院", - "计算机软件及计算机应用;自动化技术;计算机硬件技术;", - "地方高校计算机专业人才工程能力培养策略" - ], - [ - "苏炳均", - "乐山师范学院", - "计算机软件及计算机应用;计算机硬件技术;电信技术;", - "地方高校计算机专业人才工程能力培养策略" - ], - [ - "杨骏", - "乐山师范学院", - "计算机软件及计算机应用;自动化技术;电信技术;", - "地方高校计算机专业人才工程能力培养策略" - ], - [ - "项炜", - "乐山师范学院", - "计算机软件及计算机应用;计算机硬件技术;高等教育;", - "地方高校计算机专业人才工程能力培养策略" - ], - [ - "敬思远", - "乐山师范学院", - "计算机软件及计算机应用;自动化技术;计算机硬件技术;", - "地方高校计算机专业人才工程能力培养策略" - ], - [ - "苏炳均", - "乐山师范学院", - "计算机软件及计算机应用;计算机硬件技术;电信技术;", - "地方高校计算机专业人才工程能力培养策略" - ], - [ - "张娜娜", - "上海思博职业技术学院", - "计算机软件及计算机应用;轻工业手工业;", - "基于计算机视觉传达的皮革缺陷检测算法研究" - ], - [ - "张娜娜", - "上海思博职业技术学院", - "计算机软件及计算机应用;轻工业手工业;", - "基于计算机视觉传达的皮革缺陷检测算法研究" - ], - [ - "李晓辉", - "沈阳农业大学", - "计算机软件及计算机应用;计算机硬件技术;高等教育;", - "新农科背景下大学生计算机应用能力提升教学研究与实践" - ], - [ - "杨洪伟", - "沈阳农业大学", - "计算机软件及计算机应用;计算机硬件技术;高等教育;", - "新农科背景下大学生计算机应用能力提升教学研究与实践" - ], - [ - "蒋兰玲", - "辽宁省农业科学院", - "计算机软件及计算机应用;计算机硬件技术;园艺;", - "新农科背景下大学生计算机应用能力提升教学研究与实践" - ], - [ - "张芳", - "沈阳农业大学", - "计算机软件及计算机应用;计算机硬件技术;高等教育;", - "新农科背景下大学生计算机应用能力提升教学研究与实践" - ], - [ - "李晓辉", - "沈阳农业大学", - "计算机软件及计算机应用;计算机硬件技术;高等教育;", - "新农科背景下大学生计算机应用能力提升教学研究与实践" - ], - [ - "杨洪伟", - "沈阳农业大学", - "计算机软件及计算机应用;计算机硬件技术;高等教育;", - "新农科背景下大学生计算机应用能力提升教学研究与实践" - ], - [ - "蒋兰玲", - "辽宁省农业科学院", - "计算机软件及计算机应用;计算机硬件技术;园艺;", - "新农科背景下大学生计算机应用能力提升教学研究与实践" - ], - [ - "张芳", - "沈阳农业大学", - "计算机软件及计算机应用;计算机硬件技术;高等教育;", - "新农科背景下大学生计算机应用能力提升教学研究与实践" - ], - [ - "贾小军", - "嘉兴学院", - "计算机软件及计算机应用;自动化技术;教育理论与教育管理;", - "基于“复盘”模式的计算机通识课程管理研究" - ], - [ - "张春花", - "嘉兴学院", - "计算机硬件技术;", - "基于“复盘”模式的计算机通识课程管理研究" - ], - [ - "刘子豪", - "嘉兴学院", - "计算机软件及计算机应用;自动化技术;仪器仪表工业;", - "基于“复盘”模式的计算机通识课程管理研究" - ], - [ - "贾小军", - "嘉兴学院", - "计算机软件及计算机应用;自动化技术;教育理论与教育管理;", - "基于“复盘”模式的计算机通识课程管理研究" - ], - [ - "张春花", - "嘉兴学院", - "计算机硬件技术;", - "基于“复盘”模式的计算机通识课程管理研究" - ], - [ - "刘子豪", - "嘉兴学院", - "计算机软件及计算机应用;自动化技术;仪器仪表工业;", - "基于“复盘”模式的计算机通识课程管理研究" - ], - [ - "周学勇", - "信阳师范学院", - "数学;高等教育;生物学;", - "一类分数阶计算机病毒模型的稳定性分析" - ], - [ - "路振国", - "信阳师范学院", - "数学;高等教育;", - "一类分数阶计算机病毒模型的稳定性分析" - ], - [ - "程晓明", - "信阳师范学院", - "数学;", - "一类分数阶计算机病毒模型的稳定性分析" - ], - [ - "周学勇", - "信阳师范学院", - "数学;高等教育;生物学;", - "一类分数阶计算机病毒模型的稳定性分析" - ], - [ - "路振国", - "信阳师范学院", - "数学;高等教育;", - "一类分数阶计算机病毒模型的稳定性分析" - ], - [ - "程晓明", - "信阳师范学院", - "数学;", - "一类分数阶计算机病毒模型的稳定性分析" - ], - [ - "李娜", - "中国科学院大学", - "生物学;计算机软件及计算机应用;生物医学工程;", - "计算机辅助血管介入技术进展综述" - ], - [ - "贺建安", - "东南大学", - "生物学;计算机软件及计算机应用;生物医学工程;", - "计算机辅助血管介入技术进展综述" - ], - [ - "陈阳", - "东南大学", - "计算机软件及计算机应用;临床医学;计算机硬件技术;", - "计算机辅助血管介入技术进展综述" - ], - [ - "周寿军", - "中国科学院深圳先进技术研究院", - "计算机软件及计算机应用;生物医学工程;外科学;", - "计算机辅助血管介入技术进展综述" - ], - [ - "李娜", - "中国科学院大学", - "生物学;计算机软件及计算机应用;生物医学工程;", - "计算机辅助血管介入技术进展综述" - ], - [ - "贺建安", - "东南大学", - "生物学;计算机软件及计算机应用;生物医学工程;", - "计算机辅助血管介入技术进展综述" - ], - [ - "陈阳", - "东南大学", - "计算机软件及计算机应用;临床医学;计算机硬件技术;", - "计算机辅助血管介入技术进展综述" - ], - [ - "周寿军", - "中国科学院深圳先进技术研究院", - "计算机软件及计算机应用;生物医学工程;外科学;", - "计算机辅助血管介入技术进展综述" - ], - [ - "李正凡", - "云南华能澜沧江水电有限公司", - "水利水电工程;电力工业;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "谭良良", - "南京市南瑞继保工程技术有限公司", - "水利水电工程;电力工业;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "杨渊", - "西安热工研究院有限公司", - "电力工业;电信技术;水利水电工程;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "陈映喜", - "云南华能澜沧江水电有限公司", - "电力工业;水利水电工程;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "周喜", - "云南华能澜沧江水电有限公司", - "水利水电工程;电力工业;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "杨伟", - "南京市南瑞继保工程技术有限公司", - "水利水电工程;电力工业;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "李正凡", - "云南华能澜沧江水电有限公司", - "水利水电工程;电力工业;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "谭良良", - "南京市南瑞继保工程技术有限公司", - "水利水电工程;电力工业;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "杨渊", - "西安热工研究院有限公司", - "电力工业;电信技术;水利水电工程;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "陈映喜", - "云南华能澜沧江水电有限公司", - "电力工业;水利水电工程;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "周喜", - "云南华能澜沧江水电有限公司", - "水利水电工程;电力工业;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "杨伟", - "南京市南瑞继保工程技术有限公司", - "水利水电工程;电力工业;自动化技术;", - "基于时间序列的国产化水电站计算机监控系统异常行为报警方法应用" - ], - [ - "刘文", - "上海大学", - "航空航天科学与工程;计算机软件及计算机应用;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "陆小锋", - "上海大学", - "计算机软件及计算机应用;临床医学;神经病学;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "毛建华", - "上海大学", - "计算机软件及计算机应用;自然地理学和测绘学;自动化技术;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "方思凯", - "Shanghai University", - "航空航天科学与工程;计算机软件及计算机应用;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "钱国", - "上海宝冶冶金工程有限公司", - "计算机软件及计算机应用;建筑科学与工程;航空航天科学与工程;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "刘文", - "上海大学", - "航空航天科学与工程;计算机软件及计算机应用;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "陆小锋", - "上海大学", - "计算机软件及计算机应用;临床医学;神经病学;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "毛建华", - "上海大学", - "计算机软件及计算机应用;自然地理学和测绘学;自动化技术;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "方思凯", - "Shanghai University", - "航空航天科学与工程;计算机软件及计算机应用;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "钱国", - "上海宝冶冶金工程有限公司", - "计算机软件及计算机应用;建筑科学与工程;航空航天科学与工程;", - "基于机载计算机的无人机智能巡检方案" - ], - [ - "黄立鹤", - "同济大学", - "中国语言文字;外国语言文字;高等教育;", - "老年话语的计算机自动文本分析:进展与前景" - ], - [ - "曲惠宇", - "同济大学", - "中国语言文字;", - "老年话语的计算机自动文本分析:进展与前景" - ], - [ - "杨晶晶", - "同济大学", - "中国语言文字;精神病学;中国政治与国际政治;", - "老年话语的计算机自动文本分析:进展与前景" - ], - [ - "黄立鹤", - "同济大学", - "中国语言文字;外国语言文字;高等教育;", - "老年话语的计算机自动文本分析:进展与前景" - ], - [ - "曲惠宇", - "同济大学", - "中国语言文字;", - "老年话语的计算机自动文本分析:进展与前景" - ], - [ - "杨晶晶", - "同济大学", - "中国语言文字;精神病学;中国政治与国际政治;", - "老年话语的计算机自动文本分析:进展与前景" - ], - [ - "杨乐", - "山西工程科技职业大学", - "互联网技术;高等教育;", - "关于高校计算机实验室网络安全管理的研究" - ], - [ - "杨乐", - "山西工程科技职业大学", - "互联网技术;高等教育;", - "关于高校计算机实验室网络安全管理的研究" - ], - [ - "孟云飞", - "哈尔滨职业技术学院", - "计算机软件及计算机应用;轻工业手工业;教育理论与教育管理;", - "计算机系统与信息管理融合发展研究" - ], - [ - "孟云飞", - "哈尔滨职业技术学院", - "计算机软件及计算机应用;轻工业手工业;教育理论与教育管理;", - "计算机系统与信息管理融合发展研究" - ], - [ - "郝玉成", - "合肥学院", - "化学;无机化工;材料科学;", - "计算机在材料科学中的应用课程改革与应用型人才教学实践研究" - ], - [ - "张全争", - "合肥学院", - "化学;无机化工;有机化工;", - "计算机在材料科学中的应用课程改革与应用型人才教学实践研究" - ], - [ - "林文海", - "合肥学院", - "无线电电子学;高等教育;电力工业;", - "计算机在材料科学中的应用课程改革与应用型人才教学实践研究" - ], - [ - "秦广超", - "合肥学院", - "无机化工;轻工业手工业;化学;", - "计算机在材料科学中的应用课程改革与应用型人才教学实践研究" - ], - [ - "郝玉成", - "合肥学院", - "化学;无机化工;材料科学;", - "计算机在材料科学中的应用课程改革与应用型人才教学实践研究" - ], - [ - "张全争", - "合肥学院", - "化学;无机化工;有机化工;", - "计算机在材料科学中的应用课程改革与应用型人才教学实践研究" - ], - [ - "林文海", - "合肥学院", - "无线电电子学;高等教育;电力工业;", - "计算机在材料科学中的应用课程改革与应用型人才教学实践研究" - ], - [ - "秦广超", - "合肥学院", - "无机化工;轻工业手工业;化学;", - "计算机在材料科学中的应用课程改革与应用型人才教学实践研究" - ], - [ - "谭毅飞", - "上海市东亚联合控股(集团)有限公司", - "建筑科学与工程;计算机软件及计算机应用;自动化技术;", - "计算机视觉与传感技术下全新劳务计酬模式探究" - ], - [ - "谭毅飞", - "上海市东亚联合控股(集团)有限公司", - "建筑科学与工程;计算机软件及计算机应用;自动化技术;", - "计算机视觉与传感技术下全新劳务计酬模式探究" - ], - [ - "吴涤清", - "徐州医科大学", - "口腔科学;肿瘤学;", - "计算机辅助测量唇腭裂继发颌骨畸形患者手术前后口腔及气道容积的变化" - ], - [ - "李志萍", - "徐州市中心医院", - "口腔科学;肿瘤学;外科学;", - "计算机辅助测量唇腭裂继发颌骨畸形患者手术前后口腔及气道容积的变化" - ], - [ - "孟箭", - "徐州市中心医院", - "口腔科学;肿瘤学;临床医学;", - "计算机辅助测量唇腭裂继发颌骨畸形患者手术前后口腔及气道容积的变化" - ], - [ - "陈彬", - "徐州市中心医院", - "口腔科学;仪器仪表工业;肿瘤学;", - "计算机辅助测量唇腭裂继发颌骨畸形患者手术前后口腔及气道容积的变化" - ], - [ - "吴涤清", - "徐州医科大学", - "口腔科学;肿瘤学;", - "计算机辅助测量唇腭裂继发颌骨畸形患者手术前后口腔及气道容积的变化" - ], - [ - "李志萍", - "徐州市中心医院", - "口腔科学;肿瘤学;外科学;", - "计算机辅助测量唇腭裂继发颌骨畸形患者手术前后口腔及气道容积的变化" - ], - [ - "孟箭", - "徐州市中心医院", - "口腔科学;肿瘤学;临床医学;", - "计算机辅助测量唇腭裂继发颌骨畸形患者手术前后口腔及气道容积的变化" - ], - [ - "陈彬", - "徐州市中心医院", - "口腔科学;仪器仪表工业;肿瘤学;", - "计算机辅助测量唇腭裂继发颌骨畸形患者手术前后口腔及气道容积的变化" - ], - [ - "张新星", - "衢州职业技术学院", - "电力工业;机械工业;外科学;", - "计算机辅助骨科手术机器人技术发展及应用综述" - ], - [ - "赵英杰", - "衢州职业技术学院", - "外科学;自动化技术;生物医学工程;", - "计算机辅助骨科手术机器人技术发展及应用综述" - ], - [ - "陈超", - "衢州职业技术学院", - "外科学;自动化技术;生物医学工程;", - "计算机辅助骨科手术机器人技术发展及应用综述" - ], - [ - "张新星", - "衢州职业技术学院", - "电力工业;机械工业;外科学;", - "计算机辅助骨科手术机器人技术发展及应用综述" - ], - [ - "赵英杰", - "衢州职业技术学院", - "外科学;自动化技术;生物医学工程;", - "计算机辅助骨科手术机器人技术发展及应用综述" - ], - [ - "陈超", - "衢州职业技术学院", - "外科学;自动化技术;生物医学工程;", - "计算机辅助骨科手术机器人技术发展及应用综述" - ] - ], "type": "response" } \ No newline at end of file