1.robots.txt(robots协议)(统一小写）

        robots.txt是一个协议，而不是一个命令。robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。robots.txt文件告诉蜘蛛程序在服务器上什么文件是可以被查看的。即，Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫排除标准”（Robots ExclusionProtocol），网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。

         robots协议用来告知搜索引擎哪些页面能被抓取，哪些页面不能被抓取；可以屏蔽一些网站中比较大的文件，如：图片，音乐，视频等，节省服务器带宽；可以屏蔽站点的一些死链接。方便搜索引擎抓取网站内容；设置网站地图连接，方便引导蜘蛛爬取页面。

例如：某宝的robots.txt文件

表示：禁止baiduspider爬所有目录

（具体详细的解读待后续学习）

2 web的备份文件

index.php下的备份文件后缀常有 ‘.bak’ 和 ‘.~’

再经过百度得知有‘.git’ __'.swp'__'.bash_history'__'.bkf'__'.svn'

Web安全—Apache多后缀解析漏洞复现

漏洞产生原理

一：多扩展名解析漏洞
解释：Apache对于解析的文件识别扩展名会从右往左开始解析，当最右边的后缀无法识别（不在/etc/mime.types文件内），则会继续向左识别，直到识别合法后缀才进行解析。
二：Apache配置问题导致解析漏洞
1，Apache的配置文件httpd.conf中存在一行配置：AddHandler application/x-httpd-php .php表示文件名只要包含.php扩展也会被当作php文件执行
**举例：**在网站根目录下创建名称为websec.php.xxx的文件，内容如下：

Apache配置文件：

访问websec.php.xxx文件，发现文件被当作php文件执行

2，如果配置文件httpd.conf中存在一行配置：AddType application/x-httpd-php .jpg，扩展名为jpg的也会被Apache解析为php文件
举例：修改上述websec.php.xxx为websec.jpg，内容不变

配置文件：

访问websec.jpg文件，发现文件被执行

若想在springmvc里配置路径后缀,如demoControoler/test.htm  若以.htm为结尾的后缀 , 也可是其他后缀比如:(.do  .action)

1.web.xml配置

<servlet>
<servlet-name>springMvc</servlet-name>
<servlet-class>org.springframework.web.servlet.DispatcherServlet</servlet-class>
<init-param>
<param-name>contextConfigLocation</param-name>
<param-value>classpath:servlet-mvc.xml</param-value>
</init-param>
<load-on-startup>1</load-on-startup>
</servlet>
<servlet-mapping>
<servlet-name>springMvc</servlet-name>
<url-pattern>*.htm</url-pattern>
</servlet-mapping>

2.spring-mvc.xml配置

<mvc:annotation-driven  content-negotiation-manager="contentNegotiationManager"/>

<bean id="contentNegotiationManager" class="org.springframework.web.accept.ContentNegotiationManagerFactoryBean">
        <property name="favorPathExtension" value="false" />
        <property name="favorParameter" value="false" />
        <property name="ignoreAcceptHeader" value="false" />
        <property name="mediaTypes" >
            <value>
                atom=application/atom+xml;charset=UTF-8
                html=text/html;charset=UTF-8
                json=application/json;charset=UTF-8
                *=*/*;charset=UTF-8
            </value>
        </property>
    </bean>

<context:component-scan base-package="com.demo" use-default-filters="false">
<context:include-filter type="annotation" expression="org.springframework.stereotype.Controller"/>

</context:component-scan>

<bean class="org.springframework.web.servlet.view.InternalResourceViewResolver">
<property name="prefix" value="/WEB-INF/jsp/"></property>
<property name="suffix" value=".jsp"></property>
</bean>