正好这段时间多,公司没啥项目.做一个httpserver服务器玩玩,平时多练练,在项目中开发时才能更加的顺手.
 
每个程序员都应该尝试下写博客
 http://droidyue.com/blog/2017/01/02/why-every-programmer-should-try-to-write-blogs/
 
目前开源的web服务器主要有:
 https://h2o.examp1e.net/
 
http请求库libCURL
 
我推荐一个比较小众的:
 http://iunknown.iteye.com/blog/59804
 
1.先看完libevent.初步理解libevent的源代码这种事件驱动的网络框架
 
暂时先采用C语言版来实现,后面再完善成C++版本.
 
webserver模块分析和设计
 1.命令行解析功能
 命令行参数主要有哪些?服务器侦听端口,最大客户端数量,网站的根目录,配置文件名称,连接超时时间扥等
 
2.配置文件解析(tinyxml库使用)
 配置文件为服务器的主配置选项,相同选项,配置文件的配置将覆盖命令行的配置.
 3.日志库
 使用glog库,分等级将日志输出.
 
4.多客户端支持(网络传输层,负责接收连接,数据接收,数据发送)
 连接的处理,请求数据的接收,响应数据的发送,客户端请求到来的时候,主线程查看线程池中是否有空闲的工作线程,
 有:分配任务,没有:创建新的线程.此处采用libevent框架来实现.减少多余的网络问题.
 
5.http头部分析
 5.1解析http method,如GET,POST,HEAD等等
 5.2 解析http的版本
 5.3 解析URI,即请求资源的地址.
 
6.http URI的分析设计
 请求主机的位置以’/‘开始,资源位置的最后一个’/'后的字符串为实际请求的文件名.需要根据文件名来判断请求资源的类型,对于一个以"%"开头的字符,需要进行转换后使用真正的值,其后面的两个字符拼成一个字符.
 
7.http支持方法的分析设计
 暂时仅支持GET方法,服务器对应GET方法的处理逻辑分为:
 头部信息的组织(http response响应的头部信息)
 文件内容的发送
 
8.http支持CGI的分析设计(查阅http CGI的资料和使用方法)
 
9.http错误处理的分析设计
 9.1用户的请求发生错误
 9.2服务器端发生错误
 9.3网络传输过程中发生错误时
 
类设计
 多客户端并发支持->网络类,libevent构造网络框架

第一、建立连接
 
接受一个客户端连接
 
第二、接受请求报文
 
web服务器会从网络连接中读取数据，并将请求报文中的内容解析出来
 
web服务器处理结构分类：
 
 
单线程web服务器
多线程web服务器
复用的I/O服务器
复用的多线程web服务器
 
 
第三、处理请求
 
一旦web服务器收到了请求，就可以根据方法、资源和首部来对请求进行处理
 
第四、对资源的映射及访问
 
web服务器是资源服务器，负责发送预先创建好的资源
 
第五、构建响应
 
web服务器识别出资源后，就执行请求方法中描述的动作，并且构建响应状态码、响应首部、响应主题
 
响应报文通常包括：
 
 
MIMEL类型的content-type
content-length
实体内容
 
 
重定向：
 
web服务器有时会返回重定向响应而不是成功的报文，可以将浏览器重定向到其他地方去执行请求，状态码是3XX，重定向可能出现如下几种情况：
 
1.永久搬离的资源 ，状态码是301
 
2.临时搬离的资源，如果资源被临时移走或重命名，服务器可能希望将客户端重定向到新的位置上去，但因为是临时的，服务器希望客户端仍然会使用老的URL,并且收藏夹的url也不会发生变化，返回303状态码
 
第六、发送响应
 
服务器跟客户端会有多个连接，有些事空闲的，有些事持久的，对非持久连接，发送报文后，应该关闭。
 
对于持久连接，要正确地计算content-length，否则客户端就不知道什么时候响应结束了，因为多个HTTP请求在一个TCP连接上跑，对于多媒体类型，用分块传输的方式，如果content-length错误，事务处理的另一端就无法精确地检测出一条报文的结束和另一条报文的开始
 
第七、记录日志

网上已经有很多搭建的方式了，我这里用最简单的方法搞定下载功能
 
对IOT产品的开发一个必不可少的功能就是设备的OTA功能，因为完美的程序员，很多产品随着时间更加的优化，等等
 
搭建web服务器下载功能：
 
首先下载apache：sudo apt-get install apache
 
然后 sudo vim /etc/apache2/sites-available/000-default.conf 
 请注意在下面不换行 
 DocumentRoot /var/www/html 
 
  <Directory /var/www>                                                                         
      Options Indexes FollowSymLinks MultiViews                                                
      AllowOverride None                                                                       
      Order allow,deny                                                                         
      allow from all                                                                           
  </Directory>
 
接着修改目录权限：sudo chmod -R 775 /var/www 
 由ubuntu的IP地址通过浏览器进入，可以直接进入到了apache的欢迎页面，然后在/var/www目录下可以添加任意的文件
 
开始注意了，这个时候会发现文件除了bin 文件别的都是只能网页打开的，像压缩文件、txt、7z文件都不能进行下载。
 
解决方法：在 /etc/mime.types 找到这个选项application/octet-stream 在后面添加文件后缀比如 7z等格式就可以下载了（要sudo service apache2 restart）
 
/etc/mime.types 是apache很重要的文件配置，很多文件格式都在里面，具体的请百度

 学习C#时，经常会遇到Web服务器功能的程序设计问题，这里将介绍C#实现Web服务器功能的程序设计问题的解决方法。
 
 C#实现Web服务器功能的程序设计
 
 根据HTTP协议的作用原理，实现GET请求的Web服务器程序的方法如下：
 
 创建TcpListener类对象，监听某端口（任意输入闲置端口 如：8080 ）。等待、接受客户机连接到该端口，得到与客户机连接的socket;从与socket关联的输入流中读取一行客户机提交的请求信息，请求信息的格式为：GET 路径/文件名 HTTP/1.0。从请求信息中获取请求类型。如果请求类型是GET，则从请求信息中获取所访问的HTML文件名。没有HTML文件名时，则以index.html作为文件名；
 
 如果HTML文件存在，则打开HTML文件，把HTTP头信息和HTML文件内容通过socket传回给Web浏览器，然后关闭文件。否则发送错误信息给Web浏览器；关闭与相应Web浏览器连接的socket字。
 
 C#实现Web服务器功能的代码如下：
 
 
using System;  
using System.IO;  
using System.Net;  
using System.Net.Sockets;  
using System.Text;  
using System.Threading ;  
 
class MyWebServer  
{  
 
private TcpListener myListener ;  
private int port = 8080 ; // 选者任何闲置端口  
 
//开始兼听端口  
//同时启动一个兼听进程  
public MyWebServer()  
{  
try  
{  
//开始兼听端口  
myListener = new TcpListener(port) ;  
myListener.Start();  
Console.WriteLine("Web Server Running... Press ^C to Stop...");  
//同时启动一个兼听进程 ''StartListen''  
Thread th = new Thread(new ThreadStart(StartListen));  
th.Start() ;  
 
}  
catch(Exception e)  
{  
Console.WriteLine("兼听端口时发生错误 :" +e.ToString());  
}  
}  
public void SendHeader(string sHttpVersion, string sMIMEHeader, 
int iTotBytes, string sStatusCode, ref Socket mySocket)  
{  
 
String sBuffer = "";  
 
if (sMIMEHeader.Length == 0 )  
{  
sMIMEHeader = "text/html"; // 默认 text/html  
}  
 
sBuffersBuffer = sBuffer + sHttpVersion + sStatusCode + "\r\n";  
sBuffersBuffer = sBuffer + "Server: cx1193719-b\r\n";  
sBuffersBuffer = sBuffer + "Content-Type: " + sMIMEHeader + "\r\n";  
sBuffersBuffer = sBuffer + "Accept-Ranges: bytes\r\n";  
sBuffersBuffer = sBuffer + "Content-Length: " + iTotBytes + "\r\n\r\n";  
 
Byte[] bSendData = Encoding.ASCII.GetBytes(sBuffer);  
 
SendToBrowser( bSendData, ref mySocket);  
 
Console.WriteLine("Total Bytes : " + iTotBytes.ToString());  
 
}  
 
public void SendToBrowser(String sData, ref Socket mySocket)  
{  
SendToBrowser (Encoding.ASCII.GetBytes(sData), ref mySocket);  
}  
 
public void SendToBrowser(Byte[] bSendData, ref Socket mySocket)  
{  
int numBytes = 0;  
 
try  
{  
if (mySocket.Connected)  
{  
if (( numBytes = mySocket.Send(bSendData, bSendData.Length,0)) == -1)  
Console.WriteLine("Socket Error cannot Send Packet");  
else  
{  
Console.WriteLine("No. of bytes send {0}" , numBytes);  
}  
}  
else  
Console.WriteLine("连接失败....");  
}  
catch (Exception e)  
{  
Console.WriteLine("发生错误 : {0} ", e );  
 
}  
}  
public static void Main()  
{  
MyWebServer MWS = new MyWebServer();  
}  
public void StartListen()  
{  
 
int iStartPos = 0;  
String sRequest;  
String sDirName;  
String sRequestedFile;  
String sErrorMessage;  
String sLocalDir;  
 
String sMyWebServerRoot = "E:\\MyWebServerRoot\\"; //设置你的虚拟目录  
 
String sPhysicalFilePath = "";  
String sFormattedMessage = "";  
String sResponse = "";  
 
while(true)  
{  
//接受新连接  
Socket mySocket = myListener.AcceptSocket() ;  
 
Console.WriteLine ("Socket Type " +mySocket.SocketType );  
if(mySocket.Connected)  
{  
Console.WriteLine("\nClient Connected!!\n=\nCLient IP {0}\n",mySocket.RemoteEndPoint) ;  
 
Byte[] bReceive = new Byte[1024] ;  
int i = mySocket.Receive(bReceive,bReceive.Length,0) ;  
 
//转换成字符串类型  
string sBuffer = Encoding.ASCII.GetString(bReceive);  
 
 
//只处理"get"请求类型  
if (sBuffer.Substring(0,3) != "GET" )  
{  
Console.WriteLine("只处理get请求类型..");  
mySocket.Close();  
return;  
}  
 
// 查找 "HTTP" 的位置  
iStartPos = sBuffer.IndexOf("HTTP",1);  
 
string sHttpVersion = sBuffer.Substring(iStartPos,8);  
 
// 得到请求类型和文件目录文件名  
sRequest = sBuffer.Substring(0,iStartPos - 1);  
 
sRequest.Replace("\\","/");  
 
//如果结尾不是文件名也不是以"/"结尾则加"/"  
if ((sRequest.IndexOf(".") <1) && (!sRequest.EndsWith("/")))  
{  
sRequestsRequest = sRequest + "/";  
}  
 
//得带请求文件名  
iStartPos = sRequest.LastIndexOf("/") + 1;  
sRequestsRequestedFile = sRequest.Substring(iStartPos);  
 
//得到请求文件目录  
sDirName = sRequest.Substring(sRequest.IndexOf("/"), sRequest.LastIndexOf("/")-3);  
 
//获取虚拟目录物理路径  
sLocalDir = sMyWebServerRoot;  
 
Console.WriteLine("请求文件目录 : " + sLocalDir);  
 
if (sLocalDir.Length == 0 )  
{  
sErrorMessage = "<H2>Error!! Requested Directory does not exists</H2><Br>";  
SendHeader(sHttpVersion, "", sErrorMessage.Length, " 404 Not Found", ref mySocket);  
SendToBrowser(sErrorMessage, ref mySocket);  
mySocket.Close();  
continue;  
}  
 
if (sRequestedFile.Length == 0 )  
{  
// 取得请求文件名  
sRequestedFile = "index.html";  
}  
 
 
String sMimeType = "text/html";  
 
sPhysicalFilePath = sLocalDir + sRequestedFile;  
Console.WriteLine("请求文件: " + sPhysicalFilePath);  
 
if (File.Exists(sPhysicalFilePath) == false)  
{  
 
sErrorMessage = "<H2>404 Error! File Does Not Exists...</H2>";  
SendHeader(sHttpVersion, "", sErrorMessage.Length, " 404 Not Found", ref mySocket);  
SendToBrowser( sErrorMessage, ref mySocket);  
 
Console.WriteLine(sFormattedMessage);  
}  
 
else  
{  
int iTotBytes=0;  
 
sResponse ="";  
 
FileStream fs = new FileStream(sPhysicalFilePath, 
FileMode.Open, FileAccess.Read, FileShare.Read);  
 
BinaryReader reader = new BinaryReader(fs);  
byte[] bytes = new byte[fs.Length];  
int read;  
while((read = reader.Read(bytes, 0, bytes.Length)) != 0)  
{  
sResponsesResponse = sResponse + Encoding.ASCII.GetString(bytes,0,read);  
 
iTotBytesiTotBytes = iTotBytes + read;  
 
}  
reader.Close();  
fs.Close();  
 
SendHeader(sHttpVersion, sMimeType, iTotBytes, " 200 OK", ref mySocket);  
SendToBrowser(bytes, ref mySocket);  
//mySocket.Send(bytes, bytes.Length,0);  
}  
mySocket.Close();  
}  
}  
}  
}  
}