黑马程序员C语言教程：Linux系统性能优化思想

第一篇：黑马程序员C语言教程：Linux系统性能优化思想

Linux系统性能优化思想

性能问题永远是永恒的主题之一，硬件问题、软件问题、网络环境等的复杂性和多变性.导致了对系统的优化变得异常复杂，如何定位性能问题出在哪个方面，是性能优化的一大难题。

一、系统性能分析

1.1找出系统性能瓶颈

系统的性能决定任务有效性、稳定性和响应速度。Linux系统使用中常会遇到系统不稳定、响应速度慢等问题，如网页无法打开、打开速度慢等现象。有人会抱怨Linux系统不好，其实这些都是表面现象。操作系统完成一个任务是与系统自身设置、网络拓朴结构、路由设备、路由策略、接入设备、物理线路等多个方面都密切相关的，任何一个环节出现问题，都会影响整个系统的性能。

因此，当Linux应用出现问题时，应当从应用程序、操作系统、服务器硬件、网络环境等方面综合排查，定位问题出现在哪个部分，然后集中解决。

1.2提出优化方案

查找系统性能瓶颈是个复杂而耗时的过程，需要在应用程序、操作系统、服务器硬件、网络环境等方面进行查找和定位，影响性能最大的是应用程序和操作系统两个方面，而这两个方面出现的问题不易察觉，隐蔽性很强。

硬件、网络方面出现的问题，一般都能很快定位。一旦找到了系统性能问题，解决起来就非常容易。如发现系统硬件存在问题，如果是物理故障，那么更换硬件，如果是硬件性能不能满足需求，升级硬件就可以了；

如果发现是网络问题，比如带宽不够、网络不稳定，只需优化和升级网络即可； 如果是应用程序问题，修改或优化软件系统即可；

而如果是操作系统配置问题，则修改系统参数、修改系统配置。

可见，只要找到了性能瓶颈，就可以提供性能优化方案，有标准、有目的地进行系统优化。

1.3确保软硬件资源使用平衡

Linux操作系统平台由无数的开源软件支撑，常见的有Apache、Tomcat、Nginx、MySQL、Python等。开源软件的最大理念是自由、开放，Linux作为一个开源平台，最终要实现的是通过这些开源软件的支持，以最低廉的成本，达到应用性能的最优化。但是，系统的性能问题并非是孤立的，解决了一个性能瓶颈，可能会出现另一个性能瓶颈，所以说性能优化的最终目的是：在一定范围内使系统的各项资源使用趋于合理并保持一定的平衡，即系统运行良好的时候恰恰就是系统资源达到了一个平衡状态的时候。

而在操作系统中，任何一项资源的过度使用都会破坏这种平衡状态，从而导致系统响应缓慢或者负载过高。例如，CPU资源的过度使用会造成系统中出现大量的等待进程，导致应用程序响应缓慢，而进程的大量增加又会导致系统内存资源的增加，当物理内存耗尽时，系统就会使用虚拟内存，而虚拟内存的使用又会造成磁盘I/O的增加并加大CPU的开销。

因此,系统性能的优化就是在硬件、操作系统、应用软件之间找到一个平衡点。

二、分析优化涉及人员

2.1 系统管理员

在做性能优化过程中，系统管理人员承担着很重要的任务。

首先，系统管理人员要了解和掌握操作系统的当前运行状态，例如系统负载、内存状态、进程状态、CPU负荷等信息，这些信息是检测和判断系统性能的基础和依据；

其次，系统管理人员还有掌握系统的硬件信息，例如磁盘I/O、CPU型号、内存大小、网卡带宽等参数信息，然后根据这些信息综合评估系统资源的使用情况；

第三，作为一名系统管理人员，还要掌握应用程序对系统资源的使用情况，更深入的一点就是要了解应用程序的运行效率，例如是否有程序BUG、内存溢出等问题，通过对系统资源的监控，就能发现应用程序是否存在异常，如果确实是应用程序存在问题，需要把问题立刻反映给程序开发人员，进而改进或升级程序。

性能优化本身就是一个复杂和繁琐的过程，系统管理人员只有了解了系统硬件信息、网络信息、操作系统配置信息和应用程序信息才能有针对性地的展开对服务器性能优化，这就要求系统管理员有充足的理论知识、丰富的实战经验以及缜密分析问题的头脑。

2.2 系统架构设计师

系统性能优化涉及的第二类人员就是应用程序的架构设计人员。如果系统管理人员在经过综合判断后，发现影响性能的是应用程序的执行效率，那么程序架构设计人员就要及时介入，深入了解程序运行状态。

首先，系统架构设计人员要跟踪了解程序的执行效率，如果执行效率存在问题，要找出哪里出现了问题； 其次，如果真的是架构设计出现了问题，那么就要马上优化或改进系统架构，设计更好的应用系统架构。2.3 软件开发师

系统性能优化最后一个环节涉及的是程序开发人员，在系统管理员或架构设计人员找到程序或结构瓶颈后，程序开发人员要马上介入进行相应的程序修改。

修改程序要以程序的执行效率为基准，改进程序的逻辑，有针对性地进行代码优化。

例如，系统管理人员在系统中发现有条SQL语句耗费大量的系统资源，抓取这条执行的SQL语句，发现此SQL语句的执行效率太差，是开发人员编写的代码执行效率低造成的，这就需要把这个信息反馈给开发人员，开发人员在收到这个问题后，可以有针对性的进行SQL优化，进而实现程序代码的优化。

从上面这个过程可以看出，系统性能优化一般遵循的流程是：首先系统管理人员查看系统的整体状况，主要从系统硬件、网络设备、操作系统配置、应用程序架构和程序代码五个方面进行综合判断，如果发现是系统硬件、网络设备或者操作系统配置问题，系统管理员可以根据情况自主解决；如果发现是程序结构问题，就需要提交给程序架构设计人员；如果发现是程序代码执行问题，就交给开发人员进行代码优化。这样就完成了一个系统性能优化的过程。

三、影响Linux性能的各种因素

3.1 系统硬件资源

1．CPU CPU是操作系统稳定运行的根本，CPU的速度与性能在很大程度上决定了系统整体的性能，因此，大多数人认为：CPU数量越多、主频越高，服务器性能也就越好，但事实并非完全如此。目前大部分CPU在同一时间内只能运行一个线程，超线程的处理器可以在同一时间运行多个线程，因此，可以利用处理器的超线程特性提高系统性能。

在Linux系统下，只有运行SMP内核才能支持超线程，但是，安装的CPU数量越多，从超线程获得的性能方面的提高就越少。另外，Linux内核会把多核的处理器当作多个单独的CPU来识别，例如两个4核的CPU，在Linux系统下会被当作8个单核CPU。但是从性能角度来讲，两个4核的CPU和8个单核的CPU并不完全等价，根据权威部门得出的测试结论，前者的整体性能要比后者低25％~30％。可能出现CPU瓶颈的应用有邮件服务器、动态Web服务器等，对于这类应用，要把CPU的配置和性能放在主要位置。

其中：

%user：表示cpu处在用户模式下的时间百分比。%sys：表示cpu处在系统模式下的时间百分比。%iowait：表示cpu等待输入输出完成时间的百分比。

swap in：即si，表示虚拟内存的页导入，即从swap disk交换到RAM。swap out：即so，表示不腻内存的页导出，即从RAM交换到swap disk。2．内存

内存的大小也是影响Linux性能的一个重要的因素，内存太小，系统进程将被阻塞，应用也将变得缓慢，甚至失去响应；内存太大，导致资源浪费。

Linux系统采用了物理内存和虚拟内存两种方式，虚拟内存虽然可以缓解物理内存的不足，但是占用过多的虚拟内存，应用程序的性能将明显下降，要保证应用程序的高性能运行，物理内存一定要足够大；但是过大的物理内存，会造成内存资源浪费，例如，在一个32位处理器的Linux操作系统上，超过8GB的物理内存都将被浪费。因此，要使用更大的内存，建议安装64位的操作系统，同时开启Linux的大内存内核支持。由于处理器寻址范围的限制，在32位Linux操作系统上，应用程序单个进程最大只能使用2GB的内存，这样以来，即使系统有更大的内存，应用程序也无法“享”用，解决的办法就是使用64位处理器，安装64位操作系统。在64位操作系统下，可以满足所有应用程序对内存的使用需求，几乎没有限制。可能出现内存性能瓶颈的应用有打印服务器、数据库服务器、静态Web服务器等，对于这类应用要把内存大小放在主要位置。

free指令是监控Linux内存使用状况最常用的指令。free–m

一般有这样一个经验公式：

应用程序可用内存 / 系统物理内存 > 70% 时，表示系统内存资源非常充足，不影响系统性能。应用程序可用内存 / 系统物理内存 < 20%时，表示系统内存资源紧缺，需要增加系统内存。

20% < 应用程序可用内存 / 系统物理内存 < 70%时，表示系统内存资源基本能满足应用需求，暂不影响系统性能。

另外，vmstat命令也能胜任监控Linux内存的使用状况的重任。3．磁盘I/O性能

磁盘的I/O性能直接影响应用程序的性能，在一个有频繁读写的应用中，如果磁盘I/O性能得不到满足，就会导致应用停滞。好在现今的磁盘都采用了很多方法来提高I/O性能，比如常见的磁盘RAID技术。

RAID的英文全称为：RedundantArrayofIndependentDisk，即独立磁盘冗余阵列，简称磁盘阵列。RAID通过将多块独立的磁盘（物理硬盘）按不同方式组合起来形成一个磁盘组（逻辑硬盘），从而提供比单个硬盘更高的I/O性能和数据冗余。通过RAID技术组成的磁盘组，就相当于一个大硬盘，用户可以对它进行分区格式化、建立文件系统等操作，跟单个物理硬盘一模一样，唯一不同的是RAID磁盘组的I/O性能比单个硬盘要高很多，同时在数据的安全性也有很大提升。

根据磁盘组合方式的不同，RAID可以分为RAID0，RAID1、RAID2、RAID3、RAID4、RAID5、RAID6、RAID7、RAID0+

1、RAID10等级别，常用的RAID级别有RAID0、RAID1、RAID5、RAID0+1几种。

RAID0：通过把多块硬盘粘合成一个容量更大的硬盘组，提高了磁盘的性能和吞吐量。这种方式成本低，要求至少两个磁盘，但是没有容错和数据修复功能，因而只能用在对数据安全性要求不高的环境中。

RAID1：也就是磁盘镜像，通过把一个磁盘的数据镜像到另一个磁盘上，最大限度地保证磁盘数据的可靠性和可修复性，具有很高的数据冗余能力，但磁盘利用率只有50%，因而，成本最高，多用在保存重要数据的场合。

RAID5：采用了磁盘分段加奇偶校验技术，从而提高了系统可靠性，RAID5读出效率很高，写入效率一般，至少需要3块盘。允许一块磁盘故障，而不影响数据的可用性。

RAID0+1：把RAID0和RAID1技术结合起来就成了RAID0+1，至少需要4个硬盘。此种方式的数据除分布在多个盘上外，每个盘都有其镜像盘，提供全冗余能力，同时允许一个磁盘故障，而不影响数据可用性，并具有快速读/写能力。通过了解各个RAID级别的性能，可以根据应用的不同特性，选择适合自身的RAID级别，从而保证应用程序在磁盘方面达到最优性能。

4．网络宽带

Linux系统在网络性能方面的优势则显而易见，Linux下的各种应用，一般都是基于网络的。因此网络带宽也是影响性能的一个重要因素，低速的、不稳定的网络将导致网络应用程序的访问阻塞，而稳定、高速的网络带宽，可以保证应用程序在网络上畅通无阻地运行。幸运的是，现在的网络一般都是千兆带宽或光纤网络，带宽问题对应用程序性能造成的影响也在逐步降低。3.2 操作系统相关资源

基于操作系统的性能优化也是多方面的，可以从系统安装、系统内核参数、网络参数、文件系统等几个方面进行衡量，下面依次进行简单介绍。

1．系统安装优化

系统优化可以从安装操作系统开始，当安装Linux系统时，磁盘的划分，SWAP内存的分配都直接影响以后系统的运行性能，例如，磁盘分配可以遵循应用的需求：对于对写操作频繁而对数据安全性要求不高的应用，可以把磁盘做成RAID0；而对于对数据安全性较高，对读写没有特别要求的应用，可以把磁盘做成RAID1；对于对读操作要求较高，而对写操作无特殊要求，并要保证数据安全性的应用，可以选择RAID5；对于对读写要求都很高，并且对数据安全性要求也很高的应用，可以选择RAID01。这样通过不同的应用需求设置不同的RAID级别，在磁盘底层对系统进行优化操作。

随着内存价格的降低和内存容量的日益增大，对虚拟内存SWAP的设定，现在已经没有了所谓虚拟内存是物理内存两倍的要求，但是SWAP的设定还是不能忽略，根据经验，如果内存较小（物理内存小于4GB），一般设置SWAP交换分区大小为内存的2倍；如果物理内存大于4GB小于16GB，可以设置SWAP大小等于或略小于物理内存即可；如果内存大小在16GB以上，原则上可以设置SWAP为0，但并不建议这么做，因为设置一定大小的SWAP还是有一定作用的。

2．内核参数优化

系统安装完成后，优化工作并没有结束，接下来还可以对系统内核参数进行优化，不过内核参数的优化要和系统中部署的应用结合起来整体考虑。例如，如果系统部署的是Oracle数据库应用，那么就需要对系统共享内存段（kernel.shmmax、kernel.shmmni、kernel.shmall）、系统信号量（kernel.sem）、文件句柄（fs.file-max）等参数进行优化设置；如果部署的是Web应用，那么就需要根据Web应用特性进行网络参数的优化，例如修改net.ipv4.ip_local_port_range、net.ipv4.tcp_tw_reuse、net.core.somaxconn等网络内核参数。

3．文件系统优化

文件系统的优化也是系统资源优化的一个重点，在Linux下可选的文件系统有ext2、ext3、xfs、ReiserFS，根据不同的应用，选择不同的文件系统。

Linux标准文件系统是从VFS开始的，然后是ext，接着就是ext2，应该说，ext2是Linux上标准的文件系统，ext3是在ext2基础上增加日志形成的，从VFS到ext3，其设计思想没有太大变化，都是早期UNIX家族基于超级块和inode的设计理念。

XFS文件系统是SGI开发的一个高级日志文件系统，后来移植到了Linux系统下，XFS通过分布处理磁盘请求、定位数据、保持Cache的一致性来提供对文件系统数据的低延迟、高带宽的访问，因此，XFS极具伸缩性，非常健壮，具有优秀的日志记录功能、可扩展性强、快速写入性能等优点。ReiserFS是在HansReiser领导下开发出来的一款高性能的日志文件系统，它通过完全平衡树结构来管理数据，包括文件数据，文件名及日志支持等，与ext2/ext3相比，最大的优点是访问性能和安全性大幅提升。ReiserFS具有高效、合理利用磁盘空间，先进的日志管理机制，特有的搜寻方式，海量磁盘存储等优点。3.3 性能分析、调优工具

下面列举一部分常用的性能分析及调优工具。1.Linux性能分析工具

CPU性能分析工具： vmstat ps sar time

strace pstree top Memory性能分析工具： vmstat strace top ipcs ipcrm cat /proc/meminfo cat /proc/slabinfo cat /proc//maps I/O性能分析工具： vmstat iostat repquota quotacheck Network性能分析工具： ifconfig ethereal tethereal iptraf iwconfig nfsstat mrtg ntop netstat cat /proc/sys/net

2.Linux 性能调优工具

通过上述工具及命令，当我们发现了应用的性能瓶颈以后，可以通过以下工具或者命令来进行性能的调整。CPU性能调优工具： nice / renic sysctl Memory性能调优工具： swapon ulimit sysctl I/O性能调优工具： edquota quoton sysctl boot line: elevator Network性能调优工具： ifconfig iwconfig sysctl 3.5 高并发性能优化

1.最小化系统调用负载

通过socket来读写数据时，都必须会用到read和write系统调用，它跨越了kernel与user空间的边界。另外，在进入kernel之前，会通过C库来进入kernel的通用函数system_call(),从这个函数中会进入文件系统层，kernel在文件系统层中确定正在处理的是哪种设备，最好进入socket层，进行数据读取和输出操作。

我们无法避免这些system call，因此要力图最小化使用这些call的次数。所以，在将数据写入一个socket的时候，尽量一次写入所有的数据，不要执行多次写数据的操作； 对于读操作来说，最好传入可支持的最大缓冲区，因为如果没有足够的数据，kernel也会试图填充整个缓冲区。2.修改用户进程可打开文件数限制

使用ulimit命令查看系统允许当前用户进程打开的文件数限制。ulimit –n。当前用户的每个进程最多允许同时打开1024个文件。这1024个文件中还得除去每个进程必然打开的标准输入，标准输出，标准错误，服务器监听 socket，进程间通讯的unix域socket等文件，那么剩下的可用于客户端socket连接的文件数就只有大约1000个左右。

使用cat /proc/sys/fs/file-max查看Linux系统级的最大打开文件数限制。通过修改配置文件的方式修改该上限值。sudo vi /etc/security/limits.conf。

在文件尾部写入以下配置,soft软限制，hard硬限制。如下图所示。* soft nofile 65536 * hard nofile 100000

3.修改网络内核对TCP连接的有关限制

在Linux上编写支持高并发TCP连接的客户端通讯处理程序时，有时会发现尽管已经解除了系统对用户同时打开文件数的限制，但仍会出现并发TCP连接数增加到一定数量时，再也无法成功建立新的TCP连接的现象。

原因在于Linux内核的TCP/IP协议实现模块对系统中所有的客户端TCP连接对应的本地端口号的范围进行了限制(例如，内核限制本地端口号的范围为1024~32768之间)。当系统中某一时刻同时存在太多的TCP客户端连接时，由于每个TCP客户端连接都要占用一个唯一的本地端口号(此端口号在系统的本地端口号范围限制中)，如果现有的TCP客户端连接已将所有的本地端口号占满，则此时就无法为新的TCP客户端连接分配一个本地端口号了，因此系统会在这种情况下在connect()调用中返回失败，并将错误提示消息设为“Can’t assignrequested address”。因此需要修改此本地端口范围限制。

第一步，修改/etc/sysctl.conf文件，在文件中添加如下行： net.ipv4.ip_local_port_range = 1024 65000 这表明将系统对本地端口范围限制设置为1024~65000之间。请注意，本地端口范围的最小值必须大于或等于1024；而端口范围的最大值则应小于或等于65535。修改完后保存此文件。

第二步，执行sysctl命令：sysctl –p。如果系统没有错误提示，就表明新的本地端口范围设置成功。另外一种无法建立TCP连接的原因可能是因为Linux网络内核的IP_TABLE防火墙对最大跟踪的TCP连接数有限制。此时程序会表现为在 connect()调用中阻塞，如同死机，如果用tcpdump工具监视网络，也会发现根本没有TCP连接时客户端发SYN包的网络流量。

此时就必须修改内核对最大跟踪的TCP连接数的限制，方法同修改内核对本地端口号范围的限制是类似的： 第一步，修改/etc/sysctl.conf文件，在文件中添加如下行： net.ipv4.ip_conntrack_max = 10240 这表明将系统对最大跟踪的TCP连接数限制设置为10240。请注意，此限制值要尽量小，以节省对内核内存的占用。

第二步，执行sysctl命令：sysctl–p。如果系统没有错误提示，就表明系统对新的最大跟踪的TCP连接数限制修改成功。如果按上述参数进行设置，则理论上单独一个进程最多可以同时建立10000多个TCP客户端连接。4.调节TCP窗口

影响TCP性能的两个最重要的因素是连接带宽和往返时间或者RTT。

Sockets API 提供了几个 socket 选项，其中两个可以用于修改 socket 的发送和接收缓冲区的大小。尽管 socket 缓冲区的大小确定了通告 TCP 窗口的大小，但是 TCP 还在通告窗口内维护了一个拥塞窗口。因此，由于这个拥塞窗口的存在，给定的 socket 可能永远都不会利用最大的通告窗口。

5.使用支持高并发网络I/O的编程技术

可用的I/O技术有同步I/O，非阻塞式同步I/O(也称反应式I/O)，以及异步I/O。在高TCP并发的情形下，如果使用同步I/O，这会严重阻塞程序的运转，除非为每个TCP连接的I/O创建一个线程。但是，过多的线程又会因系统对线程的调度造成巨大开销。因此，在高TCP并发的情形下使用同步 I/O是不可取的，这时可以考虑使用非阻塞式同步I/O或异步I/O。非阻塞式同步I/O的技术包括使用select()，poll()，epoll()等机制。

在开发支持高并发TCP连接的Linux应用程序时，应尽量使用epoll技术来实现并发的TCP连接上的I/O控制，这将为提升程序对高并发TCP连接的支持提供有效的I/O保证。

第二篇：黑马程序员c语言教程：Oracle简介

9.通过子查询建表 通过子查询建表的例子

SQL>CREATE TABLE emp_41 AS SELECT id, last_name, userid, start_date FROM s_emp WHERE dept_id = 41;SQL> CREATE TABLE A as select * from B where 1=2;只要表的结构.10.用子查询建表的注意事项

可以关连多个表及用集合函数生成新表,注意选择出来的字段必须有合法的字段名称,且不能重复。

用子查询方式建立的表，只有非空NOT NULL的约束条件能继承过来, 其它的约束条件和默认值都没有继承过来.根据需要，可以用alter table add constraint ……再建立其它的约束条件，如primary key等.11.Foreign Key的可选参数ON DELETE CASCADE 在创建Foreign Key时可以加可选参数: ON DELETE CASCADE它的含义是如果删除外键主表里的内容，子表里相关的内容将一起被删除.如果没有ON DELETE CASCADE参数，子表里有内容，父表里的主关键字记录不能被删除掉.12.如果数据库表里有不满足的记录存在，建立约束条件将不会成功.13.给表创建和删除同义词的例子 SQL> CREATE SYNONYM d_sum 2 FOR dept_sum_vu;SQL> CREATE PUBLIC SYNONYM s_dept 2 FOR alice.s_dept;SQL> DROP SYNONYM s_dept;

十、ORACLE里的数据字典

1.什么是数据字典?ORACLE的数据字典是数据库的重要组成部分之一，它随着数据库 的产生而产生, 随着数据库的变化而变化, 体现为sys用户下所有的一些表和视图.2.数据字典里存了以下内容： 用户信息

用户的权限信息

所有数据对象信息表的约束条件统计分析数据库的视图等 不能手工修改数据字典里的信息.16

J2EE @ zxw 3.常用的数据字典

Dictionary 存放所有数据表，视图，同义词名称和解释 Dict_columns 数据字典里字段名称的和解释 Dba_users 用户 Dba_tablespaces 表空间

Dba_data_files 数据库的文件 Dba_free_space 空闲表空间 Dba_rollback_segs 回滚段

User_objects 数据对象 User_constraints 约束条件 User_sequences 序列号 User_views 视图 User_indexes 索引 User_synonyms 同义词

Session_roles 用户的角色 User_role_privs 用户的角色权限 User_sys_privs 用户的系统权限 User_tab_privs 用户的表级权限 V$session 实时用户情况 V$sysstat 实时系统统计 V$sesstat 实时用户统计 V$sgastat 实时SGA使用 V$locked_object 实时锁 V$controlfile 控制文件 V$logfile 日志文件 V$parameter 参数文件 4.数据字典的分类 数据字典四大类别

User_ 用户下所有数据库对象

All_ 用户权限范围内所有的数据库对象 Dba_ 所有的数据库对象

V$Content$nbsp;统计分析数据库的视图 赋于oem_monitor权限非DBA用户也可查询V$*视图

5.查询数据字典

SQL> select * from dictionary where instr(comments,'index')>0;SQL> select constraint_name, constraint_type, 2 search_condition, r_constraint_name 3 from user_constraints 4 where table_name = ‘&table_name';十一.控制数据、INSERT(往数据表里插入记录的语句)SQL> insert into 表名(字段名1, 字段名2, ……)values(值1, 值2, ……);SQL> insert into 表名(字段名1, 字段名2, ……)select(字段名1, 字段名2, ……)from 另外的表名 where 条件;可以用&标记变量的方法多次输入记录

快速插入数据的方法, 一般用于大于128M的数据转移 SQL> insert /*+ append */ into 表名

select * from 另外的用户名.另外的表名 WHERE 条件;SQL> commit;注意事项：

用INSERT /*+ APPEND */ 的方法会对target_tablename产生级别为6的独占锁，如果运行此命令时还有对target_tablename的DML操作会排队在它后面, 对OLTP系统在用的表操作是不合适的。17

J2EE @ zxw 2.插入字符串类型的字段的注意事项: 字符串类型的字段值必须用单引号括起来, 例如: ’GOOD DAY’

如果字段值里包含单引号’ 需要进行字符串转换, 我们把它替换成两个 单引号’ ’

字符串类型的字段值超过定义的长度会出错, 最好在插入前进行长度校验 ‘’ 标记是NULL, user 标明当前用户

日期字段的字段值可以用当前数据库的系统时间SYSDATE, 精确到秒

用字符串转换成日期型函数TO_DATE(‘2001-08-01’,’YYYY-MM-DD’)TO_DATE()还有很多种日期格式, 可以参看ORACLE DOC.年-月-日 小时:分钟:秒 的格式YYYY-MM-DD HH24:MI:SS NSERT时最大可操作的字符串长度小于等于4000个单字节, 如果要插入更长的字符串, 请考虑字段用CLOB类型, 方法借用ORACLE里自带的DBMS_LOB程序包.3、UPDATE(修改数据表里记录的语句)SQL> UPDATE 表名 SET 字段名1=值1, 字段名2=值2, …… WHERE 条件;如果修改的值N没有赋值或定义时, 将把原来的记录内容清为NULL, 最好在修改前进行非空校验;值N超过定义的长度会出错, 最好在插入前进行长度校验.新功能，可以修改子查询后的结果集

例子：SQL> update(select * from s_dept)set id=50 where id=60;

4、DELETE(删除数据表里记录的语句)SQL> DELETE FROM 表名 WHERE 条件;注意：删除记录并不能释放ORACLE里被占用的数据块表空间.它只把那些 被删除的数据块标成unused.如果确实要删除一个大表里的全部记录, 可以用 TRUNCATE 命令, 它可以释放占用的数据块表空间

SQL> TRUNCATE TABLE 表名;此操作不可回退.5、SQL语句的分类 数据定义语言(DDL)：create、alter、drop（创建、修改结构、删除）（其他：rename）数据操纵语言(DML)：insert、delete、select、update（增、删、查、改）（其他：truncate）

数据控制语言(DCL)：grant、revoke（授权、回收）、set role 事务控制：commit、rollback、savepoint（其他：lock table、set constraint、set transaction）

审计控制：audit、noaudit 系统控制：alter system 会话控制：alter session 其他语句：comment（添加注释）、explain plan、analyze、validate、call

6、ORACLE里事务控制 Commit 提交事务 Rollback 回退事务

Savepoint 设置断点, 在事务中标记位置, 事务结束, 断点释放

事务结束的情况遇到commit或者rollback遇到DDL和DCL语句发现错误，如死锁用户退出

SQL*PLUS系统重启或崩溃 7.DML操作的注意事项 18

J2EE @ zxw 以上SQL语句对表都加上了行级锁, 确认完成后, 必须加上事物处理结束的命令COMMIT 才能正式生效, 否则改变不一定写入数据库里.行级锁也未能得到释放.如果想撤回这些操作, 可以用命令 ROLLBACK 复原.在运行INSERT, DELETE 和 UPDATE 语句前最好估算一下可能操作的记录范围, 应该把它限定在较小(一万条记录)范围内,.否则ORACLE处理这个事物用到很大的回退段.程序响应慢甚至失去响应.如果记录数上十万以上这些操作, 可以把这些SQL语句分段分次完成, 其间加上COMMIT 确认事物处理.太过频繁的commit不好

第三篇：黑马程序员c语言教程：DML语言强化

sql语言的类型

数据语言实现数据的crud

DML语句(Data Manipulation Language)数据库操作语言

insert update delete select DDL语言 data definition Lanaguage

create table

create view index sequence synonym同义词

truncate table DCL语言 data control language数据语言

commit rollback savetpointe

OCA认证 OCP(dba)一起考, 参加oracle的培训 2w Oracle数据库管理员认证专员（OCA）：Oracle Certified Associate Oracle数据库管理员认证专家（OCP）： Oracle Certified Professional Oracle数据库管理员认证大师（OCM）： Oracle Certified Master

语法: INSERT INTO table [(column [, column...])] VALUES(value [, value...]);

--1 向表中插入所有列

insert into emp values(1, 'tom_111', 'enginerr', 7839, sysdate, 5000, 100, 10)--2 向表中插入部分列

insert into emp(empno, ename, job, hiredate)values(2, 'tom_2222', 'enginerr', sysdate)

--3 隐式插入空值: 没有写出的列,默认为null值--4 显示插入空值:--5 sql插入语言的地址符 & 取地址符后面相当于一个变量

mysql语言: preparedStatement语言 SQL> insert into emp(empno, ename, job, hiredate)values(&empno, &ename, &job, &hiredate);输入 empno 的值: 3

输入 ename 的值: 'tom_ccc' 输入 job 的值: 'job' 输入 hiredate 的值: '22-2月-81' 原值 1: insert into emp(empno, ename, job, hiredate)values(&empno, &ename, &job, &hiredate)新值 1: insert into emp(empno, ename, job, hiredate)values(3, 'tom_ccc', 'job', '22-2月-81')

&地址符, 可以在任何sql语言中使用.在select 语言中也可以使用地址符

SQL> select ename, job, &tt from emp;输入 tt 的值: deptno 原值 1: select ename, job, &tt from emp 新值 1: select ename, job, deptno from emp

--7 批量插入数据--创建一张表

create table emp10 as

select * from emp where 1=2;--一次性的将emp中所有10号部门的员工插入到emp10中

--在insert语言中使用子查询 子查询 不光用在查询套查询, 也可用在DML语句套select语句

insert into emp10--列完全一样,可以不写

select * from emp where deptno=10;delete from emp10;

有关update更新语句

UPDATE table SET column = value [, column = value,...] [WHERE condition];--列子

SQL> update emp10 set sal=2300 where empno=7934;

有关删除数据

DELETE [FROM] table [WHERE condition];

delete和truncate表区别

delete逐条删除 truncate先摧毁表再重建delete语言是DML语言 truncate是DDL

DML语言可以闪回 做错的并且提交了.可通过闪回,撤销操作

DDL语言不可以闪回 flashback

delete是逐条删除,会产生碎片, truncate不会产生碎片

行移动功能: 要开启闪回功能,必须要开启行移动功能delete不会释放空间 truncate会delete可以回滚 truncate不可以

oracle delete快 mysql truncate快.实验: 从文件中导入数据, 通过命名delete 和 truncate删除表数据 实验

从文件中导入数据

SQL> set timing off;SQL> set feedback off;SQL> drop table testdelete purge;SQL> @c:Sql.sql;SQL> SQL> set timing on;//最后删除数据表的时候,把时间打开,记录时间

SQL> delete from testdelete;已用时间: 00: 00: 00.03

从文件中导入数据

SQL> set timing off;@c:Sql.sql;

set timing off;

select count(*)from testdelete;set timing on;//最后删除数据表的时候,把时间打开,记录时间

truncate table testdelete;已用时间: 00: 00: 00.39

事务基本概念

概念

一个或者多个DML语言组成特点

要么都成功,要么都失败

特性

原子性 一致性 隔离性 持久性

事物的隔离性 多个客户端同时操作数据库的时, 要隔离他们的操作

否则:脏读 不可重复读 幻读

设置不同的搁置级别来解决oracle中的事务

事务起始标志 DML语言(oracle默认事务似是打开的)2 事务的结束标志

提交: 显示提交commit

隐式提交

1)执行DDL语言

eg create table语言 还有I个隐式的功能

提交之前的没有提交的DML语言(insert update)

2)正常退出

回滚: 显示 rollback

隐式 掉电/宕机/非正常退出==系统出错了 oracle事务控制--保存点

create table testsavepoint(tid number, tname varchar2(20));set feedback on

insert into testsavepoint values(1, 'tom1');insert into testsavepoint values(2, 'tom2');savepoint a;//创建一个保存点

insert into testsavepoint values(3, 'tom3a);rollback to savepoint a;

注意: 回退到savepoint a 前面插入的两条sql语句还没有提交;仍然还在一个事务里面;让事务结束的方法 显示 隐式 SQL> rollback / commit oracle数据的隔离级别问题

read only ,数据库几乎不做串行化操作,增加了read only SQL99

第四篇：黑马程序员c语言教程：Oracle概念（推荐）

七、在执行SQL语句时绑定变量

1.接收和定义变量的SQL*PLUS命令 ACCEPT DEFINE UNDEFINE & 2.绑定变量SQL语句的例子(1)SQL> select id, last_name, salary from s_emp where dept_id = &department_number;Enter value for department_number: 10 old 1: select id, last_name, salary from s_emp where dept_id=&department_number;new 1: select id, last_name, salary from s_emp where dept_id= 10 SQL> SET VERIFY OFF | ON;可以关闭和打开提示确认信息old 1和new 1的显示.3.绑定变量SQL语句的例子(2)SQL> select id, last_name, salary from s_emp where title = '&job_title';Enter value for job_title: Stock Clerk 11

J2EE @ zxw SQL> select id, last_name, salary from s_emp where hiredate >to_date('&start_hire_date','YYYY-MM-DD');Enter value for start_hire_date : 2001-01-01 把绑定字符串和日期类型变量时，变量外面要加单引号 也可绑定变量来查询不同的字段名 输入变量值的时候不要加;等其它符号 4.ACCEPT的语法和例子

SQL> ACCEPT variable [datatype] [FORMAT] [PROMPT text] [HIDE] 说明： variable 指变量名 datatype 指变量类型，如number,char等 format 指变量显示格

式 prompt text 可自定义弹出提示符的内容text hide 隐藏用户的输入符号 使用ACCEPT的例子：

ACCEPT p_dname PROMPT 'Provide the department name: ' ACCEPT p_salary NUMBER PROMPT 'Salary amount: ' ACCEPT pswd CHAR PROMPT 'Password: ' HIDE ACCEPT low_date date format 'YYYY-MM-DD' PROMPT“Enter the low date range('YYYY-MM-DD'):” 4.DEFINE的语法和例子

SQL> DEFINE variable = value 说明： variable 指变量名 value 指变量值

定义好了变良值后, 执行绑定变量的SQL语句时不再提示输入变量

使用DEFINE的例子：

SQL> DEFINE dname = sales SQL> DEFINE dname DEFINE dname = “sales”(CHAR)SQL> select name from dept where lower(name)='&dname';NAME-------------------------sales sales SQL> UNDEFINE dname SQL> DEFINE dname Symbol dname is UNDEFINED 5.SQL*PLUS里传递参数到保存好的*.sql文件里 SQL> @ /路径名/文件名 参数名1[,参数名2, „.] SQL> start /路径名/文件名 参数名1[,参数名2, „.] 注意事项: 一次最多只能获取9个&变量, 变量名称只能是从&1,&2到&9 变量名后不要加特殊的结束符号

如果在SQL*PLUS里要把&符号保存在ORACLE数据库里,要修改sql*plus环境变量define SQL> set define off;

八、概述数据模型和数据库设计 1.系统开发的阶段: Strategy and Analysis Design Build and Document Transition Production 12

J2EE @ zxw 2.数据模型

Model of system in client's mind Entity model of client's model Table model of entity model Tables on disk 3.实体关系模型(ERM)概念

ERM(entity relationship modeling)实体 存有特定信息的目标和事件 例如: 客户,订单等 属性 描述实体的属性 例如: 姓名,电话号码等 关系 两个实体间的关系 例如:订单和产品等 实体关系模型图表里的约定

Dashed line(虚线)可选参数 “may be”

Solid line(实线)必选参数 “must be”

Crow's foot(多线)程度参数 “one or more”

Single line(单线)程度参数 “one and only one” 4.实体关系模型例子

每个订单都必须有一个或几个客户

每个客户可能是一个或几个订单的申请者 5.实体关系的类型

1:1 一对一 例如: 的士和司机 M:1 多对一 例如: 乘客和飞机 1:M 一对多 例如: 员工和技能 6.校正实体关系的原则

属性是单一值的, 不会有重复

属性必须依存于实体, 要有唯一标记

没有非唯一属性依赖于另一个非唯一的属性 7.定义结构时的注意事项 减少数据冗余

减少完整性约束产生的问题 确认省略的实体,关系和属性 8.完整性约束的要求

Primary key 主关键字 唯一非NULL Foreign key 外键 依赖于另一个Primary key,可能为NULL Column 字段名 符合定义的类型和长度

Constraint 约束条件 用户自定义的约束条件,要符合工作流要求 例如: 一个销售人员的提成不能超过它的基本工资

Candidate key 候选主关键字 多个字段名可组成候选主关键字, 其组合是唯一和非NULL的

9.把实体关系图映射到关系数据库对象的方法 把简单实体映射到数据库里的表

把属性映射到数据库里的表的字段, 标明类型和注释 把唯一标记映射到数据库里的唯一关键字 把实体间的关系映射到数据库里的外键 13

J2EE @ zxw 其它的考虑: 设计索引,使查询更快

建立视图,使信息有不同的呈现面, 减少复杂的SQL语句 计划存储空间的分配 重新定义完整性约束条件

10.实体关系图里符号的含义 PK 唯一关键字的字段 FK 外键的字段

FK1,FK2 同一个表的两个不同的外键

FK1,FK1 两个字段共同组成一个外键 NN 非null字段 U 唯一字段

U1,U1 两个字段共同组成一个唯一字段

九、创建表

1.ORACLE常用的字段类型 ORACLE常用的字段类型有

VARCHAR2(size)可变长度的字符串, 必须规定长度 CHAR(size)固定长度的字符串, 不规定长度默认值为１

NUMBER(p,s)数字型p是位数总长度, s是小数的长度, 可存负数 最长38位.不够位时会四舍五入.DATE 日期和时间类型

LOB 超长字符, 最大可达4G CLOB 超长文本字符串 BLOB 超长二进制字符串

BFILE 超长二进制字符串, 保存在数据库外的文件里是只读的.数字字段类型位数及其四舍五入的结果 原始数值1234567.89 数字字段类型位数 存储的值 Number 1234567.89 Number 12345678 Number 错

Number(9,1)1234567.9 Number(9,3)错 Number(7,2)错

Number(5,-2)1234600 Number(5,-4)1230000 Number(*,1)1234567.9 2.创建表时给字段加默认值 和约束条件 创建表时可以给字段加上默认值

例如 : 日期字段 DEFAULT SYSDATE 这样每次插入和修改时, 不用程序操作这个字段都能得到动作的时间 14

J2EE @ zxw 创建表时可以给字段加上约束条件 例如: 非空 NOT NULL 不允许重复 UNIQUE 关键字 PRIMARY KEY 按条件检查 CHECK(条件)外键 REFERENCES 表名(字段名)3.创建表的例子

CREATE TABLE DEPT（EPTNO NUMBER(2)CONSTRAINT PK_DEPT PRIMARY KEY, DNAME VARCHAR2(14), LOC VARCHAR2(13));CREATE TABLE region(ID number(2)NOT NULL PRIMARY KEY, postcode number default '0' NOT NULL, areaname varchar2(30)default ' ' NOT NULL);4.创建表时的命名规则和注意事项

表名和字段名的命名规则：必须以字母开头，可以含符号A-Z,a-z,0-9,_,$,# 大小写不区分

不用SQL里的保留字, 一定要用时可用双引号把字符串括起来． 用和实体或属性相关的英文符号长度有一定的限制 注意事项: 建表时可以用中文的字段名, 但最好还是用英文的字段名

创建表时要把较小的不为空的字段放在前面, 可能为空的字段放在后面 建表时如果有唯一关键字或者唯一的约束条件，建表时自动建了索引 一个表的最多字段个数也是有限制的，254个.5.约束名的命名规则和语法

约束名的命名规则约束名如果在建表的时候没有指明，系统命名规则是SYS_Cn(n是数字)约束名字符串的命名规则同于表和字段名的命名规则 6.使用约束时的注意事项

约束里不能用系统函数,如SYSDATE和别的表的字段比较 可以用本表内字段的比较

想在事务处理后, 做约束的检查

SQL> alter session set constraints deferred.7.由实体关系图到创建表的例子 s_dept 前提条件:已有region表且含唯一关键字的字段id SQL> CREATE TABLE s_dept(id NUMBER(7)CONSTRAINT s_dept_id_pk PRIMARY KEY, name VARCHAR2(25)CONSTRAINT s_dept_name_nn NOT NULL, region_id NUMBER(7)CONSTRAINT s_dept_region_id_fk REFERENCES region(id), CONSTRAINT s_dept_name_region_id_uk UNIQUE(name, region_id));8.较复杂的创建表例子 15

J2EE @ zxw SQL> CREATE TABLE s_emp(id NUMBER(7)CONSTRAINT s_emp_id_pk PRIMARY KEY, last_name VARCHAR2(25)CONSTRAINT s_emp_last_name_nn NOT NULL，first_name VARCHAR2(25), userid VARCHAR2 CONSTRAINT s_emp_userid_nn NOT NULL CONSTRAINT s_emp_userid_uk UNIQUE, start_date DATE DEFAULT SYSDATE, comments VARCHAR2(25), manager_id NUMBER(7), title VARCHAR2(25), dept_id NUMBER(7)CONSTRAINT s_emp_dept_id_fk REFERENCES s_dept(id), salary NUMBER(11,2), commission_pct NUMBER(4,2)CONSTRAINT s_emp_commission_pct_ck CHECK(commission_pct IN(10,12.5,15,17.5,20)));

第五篇：黑马程序员c语言教程：多表查询

笛卡尔积

部门表

笛卡尔积产生结果: 行数 两个表相乘

列数: 行数相加 原因

条件等值连接

select ****

from tab1, tab2

where tab1.a = tab2.a

select count(e.ename)

from emp e, dept d

3* where e.deptno = d.deptno

SQL> /

COUNT(E.ENAME)

--------------

多表查询关键点:

等值连接 eg:查询员工信息,员工号,姓名,月薪,部门名称

select e.empno, e.ename, e.sal, d.dname

from emp e, dept d

3* where e.deptno = d.deptno

SQL> /

EMPNO ENAME SAL DNAME

--------------------------------------------

7369 SMITH 800 RESEARCH

7499 ALLEN 1600 SALES

7521 WARD 1250 SALES

7566 JONES 2975 RESEARCH

7654 MARTIN 1250 SALES

7698 BLAKE 2850 SALES

7782 CLARK 2450 ACCOUNTING

7788 SCOTT 3000 RESEARCH

7839 KING 5000 ACCOUNTING

7844 TURNER 1500 SALES

7876 ADAMS 1100 RESEARCH

7900 JAMES 950 SALES

7902 FORD 3000 RESEARCH

7934 MILLER 1300 ACCOUNTING

已选择14行。

不等值连接: eg:查询员工信息,员工号,姓名,月薪, 薪水级别

select e.empno, e.ename, e.sal, s.grade from emp e, salgrade s where e.sal >= s.losal and e.sal <=s.hisal

select e.empno, e.ename, e.sal, s.grade from emp e, salgrade s where e.sal between s.losal and s.hisal

外连接 eg:按部门统计员工人数: 部门号 部门名称 各部门人数

分析1: 10 20 30 ====> 分组

分析2: 因为各部门人数 是在员工表中..多表查询

步骤1

select d.deptno, d.dname, count(e.empno)

from dept d, emp e

where d.deptno = e.deptno

group by d.deptno, d.dname

DEPTNO DNAME COUNT(E.EMPNO)

-------------------------------------

ACCOUNTING 3

RESEARCH 5

SALES 6

步骤2 外连接....分析:为什么40号部门没有统计出来

原因: 因员工表里面 没有40号部门的员工(现象)

where d.deptno = e.deptno(sql)问题的本质

40 =====>期望: 在连接条件不成立的条件下,也要把部门编号40 给显示出来....外连接...select d.deptno, d.dname, count(e.empno)

from dept d, emp e

where d.deptno = e.deptno(+)

group by d.deptno, d.dname

左外连接:(+)写在=号的右边

自连接:--查询员工信息 ,老板信息

显示: ****的老板是**** 自连接: 把一张表看成两张表,自连接

--员工表的老板 是 老板表的员工

select e.ename, b.ename

from emp e, emp b

where e.mgr = b.empno

select e.ename|| '的老板是' || b.ename

from emp e, emp b

where e.mgr = b.empno

====> 需求 把员工表的每一条记录都显示出来

select e.ename|| '的老板是' || b.ename

from emp e, emp b

where e.mgr = b.empno(+)

select e.ename|| '的老板是' || nvl(b.ename, '他自己')

from emp e, emp b

where e.mgr = b.empno(+)

SMITH的老板是FORD

MPNO ENAME JOB MGR HIREDATE SAL COMM DEPTNO----------------------------------------------------------------------------7369 SMITH CLERK 7902 17-12月-80 800 20 7499 ALLEN SALESMAN 7698 20-2月-81 1600 300 30 7521 WARD SALESMAN 7698 22-2月-81 1250 500 30 7566 JONES MANAGER 7839 02-4月-81 2975 20 7654 MARTIN SALESMAN 7698 28-9月-81 1250 1400 30 7698 BLAKE MANAGER 7839 01-5月-81 2850 30 7782 CLARK MANAGER 7839 09-6月-81 2450 10 7788 SCOTT ANALYST 7566 19-4月-87 3000 20 7839 KING PRESIDENT 17-11月-81 5000 10 7844 TURNER SALESMAN 7698 08-9月-81 1500 0 30 7876 ADAMS CLERK 7788 23-5月-87 1100 20 7900 JAMES CLERK 7698 03-12月-81 950 30 7902 FORD ANALYST 7566 03-12月-81 3000 20 7934 MILLER CLERK 7782 23-1月-82 1300 10

14行。