使用说明

1.安装python2或者python3运行环境；

2.如果提示没有找到库，则需要安装依赖：

如果是python3，则：

[出自:jiwo.org]

		

			pip install ConfigParser
		

		

			pip install tldextract
		

如果是Python2，则：

		

			pip install tldextract
		

		

			pip install -i https://pypi.tuna.tsinghua.edu.cn/simple configparser
		

3.根据自己的需要，修改根目录下的config.cfg配置文件。 

配置文件说明

节点	参数	示例值	说明
global	save_type	mysql	保存类型，可选择file或者mysql，如果是file则保存为本地txt
global	sleep_time	1	每次搜索处理完一页后的等待时间，防止太频繁被搜索引擎屏蔽
url	url_type	realurl	保存文件txt里面显示的url类型。realurl=真实网站地址，baseurl=原始搜索引擎地址，urlparam=带参数的真实网站地址
filter	filter_status	True	是否开启过滤器，如果开启，则过滤域名和标题都不生效
filter	filter_domain	True	是否过滤域名
filter	filter_title	True	是否过滤标题
log	write_title	True	是否显示标题
log	write_name	True	是否显示搜索引擎名称
engine	baidu	True	百度搜索引擎模块是否开启
engine	sougou	True	搜狗模块是否开启
engine	so	False	搜搜模块是否开启 (搜搜现在抓取不到了)
pagesize	baidu_pagesize	50	每页条数
pagesize	sougou_pagesize	50	每页条数
pagesize	so_pagesize	10	每页条数
mysql	host	127.0.0.1	如果保存类型为Mysql，则此节点必须配置正确
mysql	port	3306	端口
mysql	user	root	用户名
mysql	password	root	密码
mysql	database	superldb	数据库名称
mysql	table	search_data	表名称
file	save_pathdir	result	如果保存类型为file，则这里设置的是保存的路径，当前为程序根目录的result文件夹
plugin	pr	True	预留的插件功能，暂时不支持

如果保存方式为Mysql,还需要执行以下sql创建表：

		

			    CREATE TABLE `search_data` (
		

		

			      `id` int(11) unsigned NOT NULL AUTO_INCREMENT,
		

		

			      `engine` varchar(20) NOT NULL DEFAULT '',
		

		

			      `keyword` varchar(100) NOT NULL DEFAULT '',
		

		

			      `baseurl` varchar(255) NOT NULL DEFAULT '',
		

		

			      `realurl` varchar(255) NOT NULL DEFAULT '',
		

		

			      `urlparam` varchar(255) NOT NULL DEFAULT '',
		

		

			      `webtitle` varchar(255) NOT NULL DEFAULT '',
		

		

			      `create_time` int(10) NOT NULL,
		

		

			      PRIMARY KEY (`id`)
		

		

			    ) ENGINE=MyISAM AUTO_INCREMENT=395 DEFAULT CHARSET=utf8;
		

项目地址：【https://github.com/super-l/superl-url】

至于要不要再开发一个JAVA GUI版本的或者php写WEB版本的，先观望观望~