赞
踩
路径
存储到数据库
(文件存放在服务器的路径或者FTP服务器
的路径)二进制数据流
的形式直接写入数据库字段中(base64形式),不推荐,存储空间太大图片在数据库的存储用途一般为
mysql
中有个blob
字段。oracle
数据库中是blob
或bfile
类型大体思路:
base64
格式),Nodejs的话可以这样转化insert into
语句插入数据表中的blob
类型字段中去。处理代码不是很麻烦,使用nodejs
很容易就可以处理。但是,我们用得更多的是存储图片的路径,实际图片是在磁盘上保存的(图片二进制放到数据库,把数据库的负担弄重了)。需要代码的话,可以看我nodejs里面对图片的处理。
互联网环境中,大访问量,数据库速度和性能方面很重要。一般在数据库存储图片的做法比较少,更多的是将图片路径存储在数据库中,展示图片的时候只需要连接磁盘路径把图片载入进来即可。
因为图片是属于大字段。一张图片要占用1MB
甚至几十MB
,所以使用数据库很浪费资源,但是如果图片量很小的情况下可以尝试,或者直接在后台开辟空间存储文件(这样也给服务器造成了不小的压力),所以最好还是使用第三方文件上传平台,像七牛云
,阿里云
,腾讯云
等。
牵扯到一些基本的数据库调优,比如这篇文章分为标题、作者、添加时间、更新时间、文章内容、文章关键字等等。
文章内容一般是比较长的。经常使用text
字段去存储。文章的内容就属于大字段。一般文章内容可以拆分到单独一个表中去。不要与文章信息存储在一张表里面。
mysql
中一张表的数据是全部在一个数据文件中的,如果大字段的数据也存储在里面,比如,程序展示列表,比如文章列表,这个时候根本不需要展示文章内容的,但是仍然会影响速度。数据库查找数据其实就是扫描那个数据文件,文件容量越小,速度就会越快(为什么单表的容量在1GB–2GB的时候基本上要分表了)。拆分出去到一张单独的表,就是单独的文件了。举一反三,相互独立,分离的思想不仅在系统开发中用到,在现实生活中经常存在的。
图片
,文件
,二进制数据
bolb
(binary large object)二进制大对像就像int
型那样,分为blob
、MEDIUMBLOB
、LONGBLOB
。其实就是从小到大
blob
容量为64KB
MEDIUMBLOB
容量为16M
LONGBLOB
容量为4G
说实话,图片用这样子存储用得还真少。使用java
的序列化函数进行序列化的值,有人存入这个字段中去。
图片要传输给mysql
存储起来,那么需要涉及到数据通信。mysql
中有个配置是限制通信数据大小的
my.conf
配置文件中的max_allowed_packet
,mysql
默认的值是1M
好多图片尤其是原始图可能不止1m
。传输的数据(也就是图片)超过这个设置大小。结果就会出错
其实所谓的性能,最关键是数据库性能
。因为随着数据库数据量增大,大部分时间耗费是在php
,java
等语言等待数据库返回数据的过程中耗费时间。
网站访问量大了后,具体的语言不是瓶颈,瓶颈都在数据库。用c,python,php,java
都能操作mysql
数据库获取数据。语言之间可能存在速度执行差异,但是其实这种差别已经很小了。至少我觉得,给予用户感觉不到明显。执行相差0.0001
秒用户感觉并没有明显的区别。
可能说,大并发(很多用户同时访问)的时候,就会体现到差别了。其实我觉得,大并发访问是数据库瓶颈。等待数据库给予数据。没达到一定级别实在体现不了差别。数据库数据量达到一定级别。语言相差0.001s
会给予用户体验上的差别。所以,这也是为什么php
很适合做web开发
了。
解析页面速度快(解释型语言,不需要编译)。可以用java
来与数据库打交道获取数据。php
不直接操作数据库,而是调用java
提供的数据接口,获取数据,马上展示在页面中。这是利用了php
的页面执行速度快的一个优势。
一般是这样子的:
按照年月日生成路径
。具体是按照年月日还是按照年月去生成路径,根据自己需要(不一定是按照日期去生成)。
”images/2012/09/25/ 1343287394783.jpg”
1343287394783. jpg
。这样子是为了避免文件名重复,多个人往同一个目录上传图片的时候会出现。唯一性
即可。0.001秒
有两个用户同时在上传图片(因为那么就会往同一个小时文件夹里面存图片)。因为时间戳是精确到秒的。为了做到图片名称唯一性而不至于覆盖,生成可以在在时间戳后面继续加毫秒微秒等。总结的规律是,并发访问量越大。就越精确就好了。为什么保存的磁盘路径,是
”images/2012/09/25/1343287394783.jpg”
,而不是” /images/2012/09/25/1343287394783.jpg”
(最前面带有斜杠)?
”./”+”images/2012/09/25/1343287394783.jpg”
进行组装。cdn加速
的时候)域名,img1.xxx.com,img2.xxx.com
这样的域名“http://img1.xxx.com/”+”images/2012/09/25/1343287394783.jpg”
/
保存起来,/images/2012/09/25/ 1343287394783.jpg
”.”+” /images/2012/09/25/ 1343287394783.jpg”
” images/2012/09/25/1343287394783.jpg”
就对了。为什么大部分系统都不会域名保存进去,像这样子
http://www.xxx.com/images/2012/09/25/1343287394783.jpg
保存到数据库中
cdn加速
就是适应这个需求产生的:现在不请求美国的服务器。直接在中国安放节点(节点是比较笼统的词语,可以理解成一台服务器,也可以理解成一个机房,就是一个点嘛),请求距离近的节点。这样子就不需要那么远的距离了。以前在长沙的网站,团购以城市分站的形式。北京和长沙用的是同一套程序。服务器在长沙。北京用户访问北京站的时候,实际上需要远距离访问长沙的服务器。速度怎么都快不起来。跟服务器性能完全没关系。当时不懂这些。不清楚怎么折腾。就想办法去做js代码压缩
,浏览器缓存
之类的。实际上瞎折腾。不是说这些前端优化不重要,哲学上有主次矛盾之分,瓶颈在哪里就去突破哪里。没解决主要矛盾,问题并不会迎刃而解。当时也不是数据库瓶颈。如果去优化数据库。也不会明显改善。就那点数据量。根本就达不到瓶颈。哪里谈得上主要矛盾。随着后来去其他公司工作,接触一些东西,类似不找瓶颈的优化例子发生在身边好几次了,先没找到瓶颈就瞎去优化。我的同事可能是抱着多多益善的心态去做的,但主要矛盾(技术上说是瓶颈)没找到,也没改善。
当时如果没想到是距离问题。也就不会想到cdn
,当时其实我根本不知道cdn服务
。我只知道,google
这些网站肯定在中国部署的服务器,要不然,中国用户还去访问美国的服务器,那再好的服务器都会速度慢的。
由于自己搭建cdn环境
和机房的资金比较大(需要大量的服务器),也需要人力维护。反正一般的公司弄不起,其实根本不划算。淘宝以前用商用的cdn服务
,后来商用的扛不住了,就搭建了自己的cdn网。我不知道新浪有没有自己搭建,但其实我觉得跟淘宝的特点有关,店铺很多,无论是商品还是交易记录总计起来商品很多的图片,图片都是静态的部分,cdn
本来就是用来做静态的(图片,css,js等)请求分发用的
。
之前在网上看到一句话,cdn网络
不是一般的公司玩得起的。
一般的公司自己搭建cdn网络
成本高,所以就有商业的cdn提供付费租用服务,这是一项很成熟的业务,很多这样的公司,大部分全国性的互联网公司都会使用到cdn
。
例子:北京访问长沙服务器,距离太远。我们完全可以把商品图片,放到北京的云服务(我们觉得现在提供给网站使用的云存储其实就是cdn,给网站提供分流和就近访问)上去。这样子北京用户访问的时候,实际上图片就是就近获取。不需要很长距离的传输。
自己用一个域名img.xxx.com
来载入图片。这个域名解析到北京的云服务上去。
做法:数据库中保存的是” images/2012/09/25/1343287394783.jpg”
,
这些图片实际上不存储在web服务器
上。上传到北京的cdn服务器
上去。
我从数据库取出来,直接”img.xxx.com/”+” images/2012/09/25/1343287394783.jpg”
比如如果还有多个,就命名img1.xx.com、img2.xx.com
反正可以随便。所以如果把域名直接保存进去,就显得很麻烦了,迁移麻烦。
像淘宝,凡客,亚马逊这些电子商务网站,我们看到请求的时候,下面往往会有
img1.xxx.cdn.com
img2.xxx.cdn.com
其实他们保存在数据库中的是相对路径。有些是不需要在数据库保存的,缩略图可以实时访问的时候用程序生成(节省很多存储空间)
实际上,把域名保存在数据库中,非常不利于系统迁移。一旦换个域名的话,原来保存在数据库中的是“www.abc.om/images/xxxxxx“
,因为路径都在数据库中写死了,下回换个域名就用不了了。那个时候自己去写sql语句批量更新字段吧。
ICP(Internet Content Provider)
,也就是网络内容提供者。联想到我们运营一个网站需要icp备案
了吗?你自己运营网站,你就是icp服务商IDC(Internet Data Center)
,互联网数据中心。IDC
的概念,目前还没有一个统一的标准。通俗点,就是提供机房托管(服务器租用和托管),域名注册之类的。了解到:淘宝以前使用了商用的存储。但是没法满足需求。据说,到2010年,淘宝网后端保存着286亿
张图片。商用的系统系统没法满足需求的时候。他们就自己开发了一个TFS(Taobao File System)
。大规模的小文件在磁盘上读取,需要磁盘磁头频繁的寻道和换道。大并发情况下和大量的操作确实很麻烦。其实借鉴了当时google
公布的FGS(Google File System
)设计论文。google
有相册服务。为每个用户提供上传图片存储。
有个观点比较好:对于老板们而言,往往觉得,用钱能解决的都不算问题。但问题在于,你遇到的问题,别人都没遇到过。那这个时候你就没有经验可以参考或者直接拿来使用。只有自己参考一些思路去创造技术了。
曾经看过这个,这个是比较适合创业公司的。价格相对便宜https://www.upyun.com/
其实,现在的云存储
本质就是一个cdn服务商
。你把静态的图片上传到他提供的服务器上去(ftp
方式上传或者api形式编写程序上传)。他为你做就近节点访问。
计费方式:按照流量付费,99
元购买100g
。怎么算流量。每次访问文件的大小累加,比如一个1m
的文件,访问一次流量就加1m
。
我个人理解,对于图片的量不大的情况下,使用这种云服务,好处不是节省存储空间。你自己的服务器100g
的空间可能创业型公司都没用完,不是什么存储空间不够用,然后去用云存储。以前我对cdn比较模糊,有这么点理解,或者以为是分散网站web服务器流压力,服务器分流。这些好处是有的。但是,只要理解了cdn产生的背景和解决的关键问题后,就会明白云存储关键好处在于:给用户就近节点访问,加速。
我觉得,如果不是出于这个考虑,或者达不到这样的目的。用其他方案也完全可以替代。何必使用云存储呢?就是你无非有实力做到全国多个节点去部署服务,才需要租用cdn来帮你,毕竟他们是规模产生的效益,专注于解决这个领域。
使用腾讯云、阿里云、华为云不香吗?
一、保存图片的上传路径到数据库: string uppath="";//用于保存图片上传路径 //获取上传图片的文件名 string fileFullname = this.FileUpload1.FileName; //获取图片上传的时间,以时间作为图片的名字可以防止图片重名 string dataName = DateTime.Now.ToString("yyyyMMddhhmmss"); //获取图片的文件名(不含扩展名) string fileName = fileFullname.Substring(fileFullname.LastIndexOf("\\") + 1); //获取图片扩展名 string type = fileFullname.Substring(fileFullname.LastIndexOf(".") + 1); //判断是否为要求的格式 if (type == "bmp" || type == "jpg" || type == "jpeg" || type == "gif" || type == "JPG" || type == "JPEG" || type == "BMP" || type == "GIF") { //将图片上传到指定路径的文件夹 this.FileUpload1.SaveAs(Server.MapPath("~/upload") + "\\" + dataName + "." + type); //将路径保存到变量,将该变量的值保存到数据库相应字段即可 uppath = "~/upload/" + dataName + "." + type; } 二、将图片以二进制数据流直接保存到数据库: 引用如下命名空间: using System.Drawing; using System.IO; using System.Data.SqlClient; 设计数据库时,表中相应的字段类型为iamge 保存: //图片路径 string strPath = this.FileUpload1.PostedFile.FileName.ToString (); //读取图片 FileStream fs = new System.IO.FileStream(strPath, FileMode.Open, FileAccess.Read); BinaryReader br = new BinaryReader(fs); byte[] photo = br.ReadBytes((int)fs.Length); br.Close(); fs.Close(); //存入 SqlConnection myConn = new SqlConnection("Data Source=.;Initial Catalog=stumanage;User ID=sa;Password=123"); string strComm = " INSERT INTO stuInfo(stuid,stuimage) VALUES(107,@photoBinary )";//操作数据库语句根据需要修改 SqlCommand myComm = new SqlCommand(strComm, myConn); myComm.Parameters.Add("@photoBinary", SqlDbType.Binary, photo.Length); myComm.Parameters["@photoBinary"].Value = photo; myConn.Open(); if (myComm.ExecuteNonQuery() > 0) { this.Label1.Text = "ok"; } myConn.Close(); 读取: ...连接数据库字符串省略 mycon.Open(); SqlCommand command = new SqlCommand("select stuimage from stuInfo where stuid=107", mycon);//查询语句根据需要修改 byte[] image = (byte[])command.ExecuteScalar (); //指定从数据库读取出来的图片的保存路径及名字 string strPath = "~/Upload/zhangsan.JPG"; string strPhotoPath = Server.MapPath(strPath); //按上面的路径与名字保存图片文件 BinaryWriter bw = new BinaryWriter(File.Open(strPhotoPath,FileMode.OpenOrCreate)); bw.Write(image); bw.Close(); //显示图片 this.Image1.ImageUrl = strPath; 采用这两种方式可以根据实际需求灵活选择。
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。