精华内容
下载资源
问答
  • 顺序加载列表中的所有网址并逐个单击指定ID 的网页元素,浏览器窗口可以查看加载进度,加载完成后会自动退出浏览器窗口,运行前可以设置刷新频率,间隔建议大于等于3秒,另外,还可以设置运行时间间隔,刷新频率和...
  • 数据查看:支持按时间、状态码、后缀名、网址排序显示数据。 附带工具:网址批量生成器、图片来源查看器、图片网站排行榜。 网址过滤:圈定和剪裁搜索范围,提高处理效率,屏蔽登出网址等。 图片分类:通过按图片...
  • 在历史网页检索系统中,存在着按时间顺序来对检索结果进行排序的特殊需求,在客观上要求系统能够比较准确地判断文档与查询词是否相关。针对这一特殊需求,引入领域的概念,将领域用于用户检索的表示,在领域的基础上...
  • 附带的缓存图片查看器升级到1.5版本,可以网址或访问时间排序,可以保存非图片类文件。 38)9.7可以对IE多选项卡同时取图,支持世界之窗3.0 39)9.7.8支持TT4.6.1,傲游2.5.2,360浏览器3.0 40)9.8.2支持取图后存盘,...
  • 目前实现了:关键词进行检索,实现了动态摘要、关键词高亮显示、自动分页、每页显示条目可自定义(默认每页显示10条检索结果) 未实现功能:相关搜索关键词条显示相关度进行排序、快照、网页标题、采集时间、...

     

    搜索引擎1.0源代码、相关说明、下载地址如下:

    1、GG3M.Search.Demo
      进行检索,就是常说的搜索引擎网站。提供检索服务。
      目前实现了:按关键词进行检索,实现了动态摘要、关键词高亮显示、自动分页、每页显示条目可自定义(默认每页显示10条检索结果)
      未实现功能:相关搜索关键词条显示、按相关度进行排序、快照、网页标题、采集时间、网页URL、并行集群检索
      其中:快照、网页标题、采集时间、网页URL 可根据实际情况自行实现
      相关搜索关键词条显示、按相关度进行排序、并行集群检索 将在下一版提供
    2、GG3M.Search.Index
      进行索引,就是常说的全文索引。
       
    3、DemoDoc 目录中的 3500个txt文档是用来做索引测试的文档。测试的使用请放置在:E:\index\DemoDoc 也可根据实际情况在代码中修改  

    4、index 目录中的.idx 文件是测试建立的索引文件。 测试的使用请放置在:E:\index\index 目录,也可根据事情情况修改配置文件
       
    5、注意事项:
      A、目前索引存储路径是 E:\index\index\ 可在配置文件中根据实际情况对配置文件“App.config、Web.config”进行修改
      <KeyInfo Key="SEARCHIDX" Value="E:\index\index\"/>
      B、索引所需词库存储路径是 E:\index\ App_Data 可在配置文件中根据实际情况对配置文件“App.config”进行修改
      <KeyInfo Key="PhysicaPath" Value="E:\index\"/> 修改后将 App_Data文件夹及其中的文件全部拷贝到对应目录即可
      C、检索所需词库存存储路径是 网站项目中的 App_Data 目录,无须修改
      D、GG3MIndex.dll 是核心库,采用C语言开发,可存放在system32目录,或项目运行的目录bin或release目录中。
       
    6、目前提供的版本是2.0版,有如下性能指标:  
      A、单机可索引500万网页、
      B、普通PC: AMD 2.0、 7200转硬盘、2G内存每4分钟可索引1000页(已经做了html parse)的文本
      C、经实际测试任意50词以内的检索,检索运算不超过 20毫秒
      D、检索速度不会因为索引的多少而发生任何变化,索引速度也不会因为文档多少或文档大小而变慢
      E、开发工具VS2010,测试环境 windos7 + CPU(AMD 2.0)、 5400转300G硬盘、2G内存
      注:本版本单机索引限制在 500万网页,超过将不在执行索引。
       
    7、本版本截止开发周期业余时间不到一个月,所以有很多不完善的地方,请大家多指正。
      我会尽快根据大家提供的建议进行改善并提供改进后的新版本。

    GG3M搜索引擎帮助中心 http://www.gg3m.com/help/
       
    8、本软件完全属于自主创作,基本没有任何借鉴和第三方代码,您可以放心的用于学习和商业用途。

    转载于:https://www.cnblogs.com/newthing/archive/2011/08/29/2157517.html

    展开全文
  • 目前实现了:关键词进行检索,实现了动态摘要、关键词高亮显示、自动分页、每页显示条目可自定义(默认每页显示10条检索结果) 未实现功能:相关搜索关键词条显示相关度进行排序、快照、网页标题、采集时间、...

    搜索引擎1.0源代码、相关说明、下载地址如下:

    1、GG3M.Search.Demo
    进行检索,就是常说的搜索引擎网站。提供检索服务。
    目前实现了:按关键词进行检索,实现了动态摘要、关键词高亮显示、自动分页、每页显示条目可自定义(默认每页显示10条检索结果)
    未实现功能:相关搜索关键词条显示、按相关度进行排序、快照、网页标题、采集时间、网页URL、并行集群检索
    其中:快照、网页标题、采集时间、网页URL 可根据实际情况自行实现
    相关搜索关键词条显示、按相关度进行排序、并行集群检索 将在下一版提供
    2、GG3M.Search.Index
    进行索引,就是常说的全文索引。

    3、DemoDoc 目录中的 3500个txt文档是用来做索引测试的文档。测试的使用请放置在:E:\index\DemoDoc 也可根据实际情况在代码中修改

    4、index 目录中的.idx 文件是测试建立的索引文件。 测试的使用请放置在:E:\index\index 目录,也可根据事情情况修改配置文件

    5、注意事项:
    A、目前索引存储路径是 E:\index\index\ 可在配置文件中根据实际情况对配置文件“App.config、Web.config”进行修改
    <KeyInfo Key="SEARCHIDX" Value="E:\index\index\"/>
    B、索引所需词库存储路径是 E:\index\ App_Data 可在配置文件中根据实际情况对配置文件“App.config”进行修改
    <KeyInfo Key="PhysicaPath" Value="E:\index\"/> 修改后将 App_Data文件夹及其中的文件全部拷贝到对应目录即可
    C、检索所需词库存存储路径是 网站项目中的 App_Data 目录,无须修改
    D、GG3MIndex.dll 是核心库,采用C语言开发,可存放在system32目录,或项目运行的目录bin或release目录中。

    6、目前提供的版本是2.0版,有如下性能指标:
    A、单机可索引500万网页、
    B、普通PC: AMD 2.0、 7200转硬盘、2G内存每4分钟可索引1000页(已经做了html parse)的文本
    C、经实际测试任意50词以内的检索,检索运算不超过 20毫秒
    D、检索速度不会因为索引的多少而发生任何变化,索引速度也不会因为文档多少或文档大小而变慢
    E、开发工具VS2010,测试环境 windos7 + CPU(AMD 2.0)、 5400转300G硬盘、2G内存
    注:本版本单机索引限制在 500万网页,超过将不在执行索引。

    7、本版本截止开发周期业余时间不到一个月,所以有很多不完善的地方,请大家多指正。
    我会尽快根据大家提供的建议进行改善并提供改进后的新版本。

    GG3M搜索引擎帮助中心 http://www.gg3m.com/help/

    8、本软件完全属于自主创作,基本没有任何借鉴和第三方代码,您可以放心的用于学习和商业用途。

    展开全文
  • Redis介绍(二)

    2020-06-13 10:19:09
    1 有时候一个网页,比图说我们网盘可以查询保存时间按时间顺序显示,还有发的博客,也常常是按时间先后顺序排版!而有序的集合,常常使用场景是大数据排版,所以也很少取得全部数据!Redis认为,开发者在做完交集和...

    六 实现排序
    1 有时候一个网页,比图说我们网盘可以查询保存时间按时间顺序显示,还有发的博客,也常常是按时间先后顺序排版!而有序的集合,常常使用场景是大数据排版,所以也很少取得全部数据!Redis认为,开发者在做完交集和并集运算后不需要直接获得全部结果!二是希望将其存进新的键中方便后续处理!
    实现排序,就应该用到有序的集合类型。
    2 sort命令 实现id由小到大排序!

    七 redis可以实现任务队列
    优点:松耦合 易于扩展
    在这里插入图片描述

    8 redis 集群
    1 容量看:单个redis在性能上容易成为储存瓶颈所以需要数据分片 分担压力
    2 结构看:redis单点故障问题,所以数据需备份到多个redis服务器!
    8.1 复制
    通过持久化功能,redis保证了即使在服务器重启后数据也不会丢失,或者减少损失! 做法是,将数据库复制多个副本以部署在不同的服务器。这样即使一台服务器出现故障,其他服务器怡然可以提供服务。
    在这里插入图片描述
    原理实现:
    一个从数据库启动时,给主数据库发送SYNC命令,主数据库接手后,开始在后台保存快照,将保存快照期间接受到的命令缓存,完成后,redis将快照文件和所有缓存的命令发送给从数据(复制初始化),复制初始化1后,主数据库每当接收到写命令就会将命令同步给从数据库!从而保证主从一致的问题!
    当网络波动后恢复后,会将期间执行的增删改命令重新传进从数据库!
    当然,从数据库也还可以有其他从数据库!

    8.2读写分离一致性
    一般,为了缓解压力。主数据库用来写,从数据库用来读。

    8.3 从数据库持久化
    持久化比较消耗时间。Redis为了提高性能,一般主数据库禁用持久化,从数据库持久化。
    当从数据库崩溃,连接后 可以直接从持久化内存中读取数据。
    当主数据库崩溃,则:
    1从数据库新选为主数据库
    2老的主数据库连接上后,变成了从数据库,然后再同步回来!

    8.4 哨兵
    监听redis系统运行状况!
    1 监控主数据库和从数据库是否正常运行!
    2 主数据库出现故障,监听后,自动将从数据库转化为主数据库!

    在这里插入图片描述

    实现原理: 哨兵会连接主节点,同时监听多个主从,需要指定不同主从代号不同
    每10s发动info信息,从主从节点获取info返回的结果,包括从节点状态,记录到哨兵内存
    每秒想所有的集群节点发动心跳检测。
    如果发现宕机:
    1从节点宕机:哨兵在内存上记录一份宕机状态!
    2 主节点宕机:
    发起投票选举,让所有哨兵进程判断,过半投票。选出从节点升为主节点,
    (可以在配置文件设置从节点优先级)
    一旦重新选举完成,烧饼会修改从节点的redis。Conf文件。记录他是主节点,之前的主节点连接后,哨兵讲其变成新上任的主节点的从节点!

    九 哨兵集群实现的分布式
    在这里插入图片描述
    Redis3.0 最大的特性就是支持集群,而且拥有单机同样的性能!同时在网络分区后能够提供一定的可访问性以及对主从数据库故障恢复的支持!

    插槽的分配
    在一个集群中,所有的键都会通过算法分配到16384个插槽中(通过键名进行CEC算法计算散列值,然后对16384取余),每个主数据库会负责一部分插槽。
    槽道使用示意图:
    在这里插入图片描述

    展开全文
  • 分类的好处在于能够从不同的侧面管理/浏览/分析对比关键词,例如按时间,按行业,按热度,按搜索渠道(百度搜到的,淘宝搜到的等等)。 9) 支持关键词排序。例如:按百度指数排序,按网页收录量排序,按竞争对手...
  • 分类的好处在于能够从不同的侧面管理/浏览/分析对比关键词,例如按时间,按行业,按热度,按搜索渠道(百度搜到的,淘宝搜到的等等)。 9) 支持关键词排序。例如:按百度指数排序,按网页收录量排序,按竞争对手...
  • 数据查看:支持按时间、状态码、后缀名、网址排序显示数据。 附带工具:网址批量生成器、图片来源查看器、图片网站排行榜。 网址过滤:圈定和剪裁搜索范围,提高处理效率,屏蔽登出网址等。 图片分类:通过按图片...
  • 2、可以点击时间、IP地址、adlogger自定义渠道、点击所在展示页面、广告格式、广告导出网址进行升降排序。 其中最重要的是IP地址排序,可以很容易地找出来自同一IP的点击次数,找出恶意点击。 3、在第二个功能...
  • 7.1 进入、离开网页显示信息 193 7.2 单击和双击鼠标事件 194 7.3 取得鼠标的按键 195 7.4 禁止单击鼠标右键 196 7.5 绝对禁止单击鼠标右键 197 7.6 鼠标控制文字的滚动 198 7.7 取得鼠标在网页中的X、Y坐标...
  • 文件排序方式包括:名称排序、类型排序、文件大小排序、修改时间排序,每种排序还包括正序和倒序。后台可设置此功能的开关。[试用] 增加11种语言包。包括:日语,西班牙语,俄语,德语,法语,意大利语,...
  • 2、可以点击时间、IP地址、adlogger自定义渠道、点击所在展示页面、广告格式、广告导出网址进行升降排序。 其中最重要的是IP地址排序,可以很容易地找出来自同一IP的点击次数,找出恶意点击。3、在第二个功能...
  • Daily Scrum 11.13

    2014-11-13 20:54:00
    姓名 今日任务 明日任务 ...按照热度排序->...按照热度排序->...1增设选择网址txt文件按钮,原本的yes+start按钮弹出选择文件框设计不友好2没有网址或者...记录爬取时间并且实时动态显示:爬取成功网页数,过滤...
    姓名 今日任务 明日任务
    黄新越 按照热度排序->产生柱状图 按照热度排序->产生柱状图
    刘垚鹏 1增设选择网址txt文件按钮,原本的yes+start按钮弹出选择文件框设计不友好
    2没有网址或者没有输入数字都会出异常但是无法弹出窗口提示用户的bug修复
    总体代码架构整合
    王骜 记录爬取时间并且实时动态显示:爬取成功网页数,过滤网页数,根据分类显示对应百分比柱状图 总体代码架构整合
    林旭鹏 修复(聚集型)关键字爬取功能无法进行中文关键字的爬取bug 优化整体UI布局
    安康 没有网址或者没有输入数字都会出异常但是无法弹出窗口提示用户的bug修复 优化整体UI布局
    黄伟龙 爬虫程序现有BUG的测试 预先合作编写测试用例
    马佐霖 爬虫程序现有BUG的测试 预先合作编写测试用例
    李桐 爬虫程序现有BUG的测试与会议记录 预先合作编写测试用例与会议记录

         大家的任务确实基本都完成了,明天将黄新越的代码功能整合到我们的已有程序中迭代一的任务就算初步成型了。到目前为止迭代一有三个问题,一是饼状图依然没有实现动态效果,这个经过研究如果要改的话还要改API,具体会不会继续完善我们在下一轮迭代中会进行需求分析讨论性价比后再做决定。二是目前的(综合型)链接+关键字爬取的过滤算法算法相对比较简单,虽然适用于大多数的网页筛选,但是有些特殊的网页不能有效的进行过滤,造成符合条件的网页的流失,更加精确的算法的研究和实现将放在下一轮迭代中;三是暂停后已经正在下载的文件会继续下载,这个问题我们也准备留到下一轮迭代,应该不会很难。

    燃尽图如下:(P.S这个燃尽图真的没有糊弄作假,我们这一轮迭代在短时间内集中开了两三次会后完成的确实比较顺利)

    转载于:https://www.cnblogs.com/newbe/p/4095857.html

    展开全文
  • ②、网址和二维码分类可以按时间排序、按访问量排序、按评论数排序;③、支持开启或关闭详情页;④、支持链接一键增加nofollow属性; 4、底部友情链接可以在后台修改,且可以关闭。 三、列表页 1、在分类管理可以...
  • 商品设置排序ID可以指定商品排在哪个位置 默认添加时间排序 设置后推荐位 频道 预告 今日新品都排序ID进行排序 免费白拿排序 友链排序 ">功能简介: 1 商品管理 后台添加商品 修改商品 删除商品 搜索商品 搜索...
  • 9.文章排序功能:单击列表中的表头可实现排序,比如单击标题可以实现将列表中的文章标题排序;   10.自动保存设置功能:退出时不用担心自己的数据会丢失,程序会自动保存列表中的所有文章以及相关设置。
  • 淘宝大买家内置多种排序方式(时间排序,价格排序,信用排序,销量排序,销量 价格,销量 信用),可以快速方便的查找到想要的宝贝。 淘宝上的宝贝铺天盖地,如何在这些信息中找到最便宜、最放心的宝贝? 最便宜的...
  • 分类的好处在于能够从不同的侧面管理/浏览/分析对比关键词,例如按时间,按行业,按热度,按搜索渠道(百度搜到的,淘宝搜到的等等)。 9) 支持关键词排序。例如:按百度指数排序,按网页收录量排序,按竞争对手...
  • 3.35 文本框显示网页中选中的内容 3.36 文字的垂直滚动 3.37 文字幻灯片 3.38 随机动态文字效果 3.39 实现textarea的自动滚动 3.40 使用marquee实现文字上下滚动 3.41 类似安装效果的textarea滚动 3.42 始终显示在最...
  •  活动筛选页:用户可以搜索某一类型的活动,支持按活动类型搜索跟按时间搜索。  活动详情页:显示活动的内容,点击图片可以查看该图片,支持图片下载。用户可以发表活动评论,但不能上传到服务器,API接口不支持...
  • adloggerv1.23中文汉化版

    2021-03-26 04:06:29
    2、可以点击时间、IP地址、adlogger自定义渠道、点击所在展示页面、广告格式、广告导出网址进行升降排序。其中最重要的是IP地址排序,可以很容易地找出来自同一IP的点击次数,找出恶意点击。3、在第二个功能基础...
  • 八种风格时间显示 显示登陆时间 日历生成器 退出显示访问时间 一款特酷的时钟 全中文日期显示 纯JavaScript时钟 距离某天时间 显示特殊节日脚本 时钟加在背景上 Form中的时钟 带开关的Form时钟 距离...
  • 访问时间或访问次数排序 鼓舞人心的图表视图 网页浏览量的折线图 标题或域名列出的访问量排名前N的网站的饼图 URL方案的饼图 饼图 屏幕截图 发展历程 History Master是用v2.0.0之前的纯JavaScript编写的,您可以...
  • 淘宝大买家

    2012-07-10 13:51:58
    淘宝大买家内置多种排序方式(时间排序,价格排序,信用排序,销量排序,销量+价格,销量+信用),可以快速方便的查找到想要的宝贝。 淘宝上的宝贝铺天盖地,如何在这些信息中找到最便宜、最放心的宝贝? 最便宜...
  • 安装方法跟其他程序源码一样 功能简介: 1、商品管理 后台添加商品、修改商品、删除商品、搜索商品,搜索...默认添加时间排序。设置后推荐位,频道,预告,今日新品都排序ID进行排序。免费白拿排序、友链排序。
  • 淘宝大买家内置多种排序方式(时间排序,价格排序,信用排序,销量排序,销量+价格,销量+信用),可以快速方便的查找到想要的宝贝。 淘宝上的宝贝铺天盖地,如何在这些信息中找到最便宜、最放心的宝贝? 最便宜...
  • 3.35 文本框显示网页中选中的内容 3.36 文字的垂直滚动 3.37 文字幻灯片 3.38 随机动态文字效果 3.39 实现textarea的自动滚动 3.40 使用marquee实现文字上下滚动 3.41 类似安装效果的textarea滚动 3.42 始终显示在最...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 438
精华内容 175
关键字:

网页显示按时间排序