pythonfopen_fopen/open区别

UNIX环境下的C对二进制流文件的读写有两套班子&＃xff1a;1) fopen,fread,fwrite ; 2) open, read, write这里简单的介绍一下他们的区别。1. fopen系列是标准的C库函数&＃xff1b;open系列是POSIX定义的&＃xff0c;是UNIX系统里的system call。也就是说&＃xff0c;fopen系列更具有可移植性&＃xff1b;而open系列只能用在POSIX的操作系统上。2.使用fopen系列函数时要定义一个指代文件的对象&＃xff0c;被称为“文件句柄”(file handler)&＃xff0c;是一个结构体&＃xff1b;而open系列使用的是一个被称为“文件描述符”(file descriptor)的int型整数。3. fopen系列是级别较高的I/O&＃xff0c;读写时使用缓冲&＃xff1b;而open系列相对低层&＃xff0c;更接近操作系统&＃xff0c;读写时没有缓冲。由于能更多地与操作系统打交道&＃xff0c;open系列可以访问更改一些fopen系列无法访问的信息&＃xff0c;如查看文件的读写权限。这些额外的功能通常因系统而异。4.使用fopen系列函数需要"#include "&＃xff1b;使用open系列函数需要"#include "&＃xff0c;链接时要之用libc(-lc)小结&＃xff1a;总的来说&＃xff0c;为了使程序获得更好的可移植性&＃xff0c;未到非得使用一些fopen系列无法实现的功能的情况下&＃xff0c;fopen系列是首选。

read/write和fread/fwrite区别

1,fread是带缓冲的,read不带缓冲.

2,fopen是标准c里定义的,open是POSIX中定义的.

3,fread可以读一个结构.read在linux/unix中读二进制与普通文件没有区别.

4,fopen不能指定要创建文件的权限.open可以指定权限.

5,fopen返回指针,open返回文件描述符(整数).

6,linux/unix中任何设备都是文件,都可以用open,read.如果文件的大小是8k。你如果用read/write&＃xff0c;且只分配了2k的缓存&＃xff0c;则要将此文件读出需要做4次系统调用来实际从磁盘上读出。如果你用fread/fwrite&＃xff0c;则系统自动分配缓存&＃xff0c;则读出此文件只要一次系统调用从磁盘上读出。也就是用read/write要读4次磁盘&＃xff0c;而用fread/fwrite则只要读1次磁盘。效率比read/write要高4倍。如果程序对内存有限制&＃xff0c;则用read/write比较好。都用fread和fwrite,它自动分配缓存,速度会很快,比自己来做要简单。如果要处理一些特殊的描述符,用read和write,如套接口,管道之类的系统调用write的效率取决于你buf的大小和你要写入的总数量&＃xff0c;如果buf太小&＃xff0c;你进入内核空间的次数大增&＃xff0c;效率就低下。而fwrite会替你做缓存&＃xff0c;减少了实际出现的系统调用&＃xff0c;所以效率比较高。如果只调用一次(可能吗?)&＃xff0c;这俩差不多&＃xff0c;严格来说write要快一点点(因为实际上fwrite最后还是用了write做真正的写入文件系统工作)&＃xff0c;但是这其中的差别无所谓。

&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;&＃43;

当

某个程序打开文件时&＃xff0c;操作系统返回相应的文件描述符&＃xff0c;程序为了处理该文件必须引用此描述符。所谓的文件描述符是一个低级的正整数。最前面的三个文件描述符

(0&＃xff0c;1&＃xff0c;2)分别与标准输入(stdin)&＃xff0c;标准输出(stdout)和标准错误(stderr)对应。因此&＃xff0c;函数 scanf() 使用

stdin&＃xff0c;而函数 printf() 使用 stdout。你可以用不同的文件描述符改写默认的设置并重定向进程的 I/O 到不同的文件。

因此若我们要访问文件&＃xff0c;而且我们用的调用的函数又是write,read,open和close时&＃xff0c;我们就必须用到文件描述符(一般文件从3开始)。当然

若调用的函数是fwrite&＃xff0c;fread&＃xff0c;fopen和fclose时就可以绕开文件描述符&＃xff0c;与他们对应的则是文件流。

注意&＃xff1a;若用open打开或者是创建一个文件时&＃xff0c;open函数此时会返回一个文件描述符&＃xff0c;此时该文件描述符只能用于write或者是read&＃xff0c;不能在某个函数里面同时用同一个文件描述符来供write和read调用&＃xff0c;除非调用了close关闭了该文件描述符。

1、首先说什么是文件描述符&＃xff0c;它有什么作用&＃xff1f;

文件描述符是一个简单的整数&＃xff0c;用以标明每一个被进程所打开的文件和socket。第一个打开的文件是0&＃xff0c;第二个是1&＃xff0c;依此类推。Unix 操作系统通常给每个进程能打开的文件数量强加一个限制。更甚的是&＃xff0c;unix 通常有一个系统级的限制。

因为squid 的工作方式&＃xff0c;文件描述符的限制可能会极大的影响性能。当squid

用完所有的文件描述符后&＃xff0c;它不能接收用户新的连接。也就是说&＃xff0c;用完文件描述符导致拒绝服务。直到一部分当前请求完成&＃xff0c;相应的文件和socket

被关闭&＃xff0c;squid 不能接收新请求。当squid发现文件描述符短缺时&＃xff0c;它会发布警告。

在运行./configure 之前&＃xff0c;检查你的系统的文件描述符限制是否合适&＃xff0c;能给你避免一些麻烦。大多数情况下&＃xff0c;1024 个文件描述符足够了。非常忙的cache可能需要4096或更多。在配置文件描述符限制时&＃xff0c;我推荐设置系统级限制的数量为每个进程限制的2 倍。

2、怎么突破&＃xff0c;具体方法&＃xff1f;

先查看LINUX默认的文件描述符&＃xff1a;

# ulimit -n

1024

我们用命令

ulimit -HSn 65536

来增大文件描述符&＃xff0c;然后编译安装squid&＃xff0c;

把ulimit -HSn 65536放到/etc/rc.d/rc.local让启动时加载。

以下为转载&＃xff1a;

Linux

在Linux 上配置文件描述符有点复杂。在编译squid 之前&＃xff0c;你必须编辑系统include 文件中的一个&＃xff0c;然后执行一些shell 命令。请首先编辑/usr/include/bits/types.h 文件&＃xff0c;改变__FD_SETSIZE 的值&＃xff1a;

#define _ _FD_SETSIZE 8192

下一步&＃xff0c;使用这个命令增加内核文件描述符的限制&＃xff1a;

# echo 8192 >; /proc/sys/fs/file-max

最后&＃xff0c;增加进程文件描述符的限制&＃xff0c;在你即将编译squid 的同一个shell 里执行&＃xff1a;

sh# ulimit -Hn 8192

该命令必须以root 运行&＃xff0c;仅仅运行在bash shell。不必重启机器。

使用这个技术&＃xff0c;你必须在每一次系统启动后执行上述echo 和ulimit 命令&＃xff0c;或者至少在squid 启动之前。假如你使用某个rc.d 脚本来启动squid&＃xff0c;那是一个放置这些命令的好地方。

补充&＃xff1a;

[url&＃61;Javascript:;]文件描述符[/url]

是个很小的正整数&＃xff0c;它是一个索引值&＃xff0c;指向内核为每一个进程所维护的该进程打开文件的记录表。

文件描述符的优点&＃xff1a;兼容POSIX标准&＃xff0c;许多

[url&＃61;Javascript:;]Linux[/url]

和

[url&＃61;Javascript:;]UNIX[/url]

系统调用都依赖于它。

文件描述符的缺点&＃xff1a;不能移植到UNIX以外的系统上去&＃xff0c;也不直观。

基于文件描述符的输入输出函数&＃xff1a;

open&＃xff1a;打开一个文件&＃xff0c;并指定访问该文件的方式&＃xff0c;调用成功后返回一个文件描述符。

creat&＃xff1a;打开一个文件&＃xff0c;如果该文件不存在&＃xff0c;则创建它&＃xff0c;调用成功后返回一个文件描述符。

close&＃xff1a;关闭文件&＃xff0c;进程对文件所加的锁全都被释放。

read&＃xff1a;从文件描述符对应的文件中读取数据&＃xff0c;调用成功后返回读出的字节数。

write&＃xff1a;向文件描述符对应的文件中写入数据&＃xff0c;调用成功后返回写入的字节数。

ftruncate&＃xff1a;把文件描述符对应的文件缩短到指定的长度&＃xff0c;调用成功后返回0。

lseek&＃xff1a;在文件描述符对应的文件里把文件指针设定到指定的位置&＃xff0c;调用成功后返回新指针的位置。

fsync:将所有已写入文件中的数据真正写到磁盘或其他下层设备上&＃xff0c;调用成功后返回0。

fstat&＃xff1a;返回文件描述符对应的文件的相关信息&＃xff0c;把结果保存在struct stat中&＃xff0c;调用成功后返回0。

fchown&＃xff1a;改变与打开文件相关联的所有者和所有组&＃xff0c;调用成功后返回0。

fchmod&＃xff1a;把文件描述符对应的文件的权限位改为指定的八进制模式&＃xff0c;调用成功后返回0。

flock&＃xff1a;用于向文件描述符对应的文件施加建议性锁&＃xff0c;调用成功后返回0。

fcntl&＃xff1a;既能施加建议性锁也能施加强制性锁&＃xff0c;能建立记录锁、读取锁和写入锁&＃xff0c;调用成功后返回0。

dup&＃xff1a;复制文件描述符&＃xff0c;返回没使用的文件描述符中最小的编号。

dup2&＃xff1a;由用户指定返回的文件描述符的值&＃xff0c;用来重新打开或重定向一个文件描述符。

select&＃xff1a;同时从多个文件描述符读取数据或向多个文件描述符写入数据。

3.底层函数简单说明

1)write

#include

size_t write(int fildes,const void *buf,size_t nbytes);

参数说明&＃xff1a;

fildes&＃xff1a;与文件相对应的文件描述符&＃xff0c;可通过调用open函数获取

buf&＃xff1a;存放将写入文件的数据&＃xff0c;可以是字符串&＃xff0c;也可是其他数据。其中buf是指向字符串的指针

nbytes&＃xff1a;需写进文件的字节数

返回值&＃xff1a;

-1&＃xff1a;写入失败

0&＃xff1a;写入0个字节

x&＃xff1a;已写入x个字节

1)read

#include

size_t read(int fildes,char *buf,size_t nbytes);

参数说明&＃xff1a;

fildes&＃xff1a;文件描述符

buf&＃xff1a;存放从文件中读取的数据

nbytes&＃xff1a;希望读取的直接数

返回值&＃xff1a;

-1&＃xff1a;读取失败

0&＃xff1a;读取0个字节

x&＃xff1a;已读取x个字节

3)open

#include

#include

#include

int open(const char *path,int oflags);

int open(const char *path,int oflags,mode_t mode);

参数说明&＃xff1a;

path&＃xff1a;文件存放路径&＃xff0c;比如文件ksj.c位于/home/ksj,则path&＃61;"/home/ksj/ksj.c";

oflags&＃xff1a;打开方式。取值如下&＃xff1a;

O_RDONLY&＃xff1a;以只读方式打开&＃xff0c;O_WRONLY&＃xff1a;以只写方式打开&＃xff0c;O_RDWR&＃xff1a;以读写方式打开

oflages参数中还包括下列可选模式的组合(用按位或操作)

O_APPEND&＃xff1a;把写入数据追加在文件的末尾

O_TRUNC&＃xff1a;把文件长度设为0&＃xff0c;丢弃已有的内容

O_CREAT&＃xff1a;如果需要&＃xff0c;就按参数mode中给出的访问模式创建文件

O_EXCL&＃xff1a;已O_CREAT一起使用&＃xff0c;确保调用者创建出文件

mode&＃xff1a;当用open创建文件时&＃xff0c;可包含该参数&＃xff0c;像系统说明该文件的归属及权限。该部分内容太多了&＃xff0c;不想写了&＃xff0c;详细资料大家自己上网查把&＃xff0c;或者查看《Linux程序设计》第84页。呵呵

4)close

#include

int close(int fildes);

参数&＃xff1a;

fildes&＃xff1a;文件描述符

返回&＃xff1a;

success&＃xff1a;0

fail&＃xff1a;-1

4.几个函数之间的简单区别

1)write和fwrite

A&＃xff1a;write用的是文件描述符&＃xff0c;fwrite用的是文件流

B&＃xff1a;write是将数据写入文件&＃xff0c;而fwrite是将数据写进文件流

2)read和fread

A&＃xff1a;read用的是文件描述符&＃xff0c;fread用的是文件流

B&＃xff1a;read是从文件中读取数据&＃xff0c;而fread是从文件流中读取数据

3)fgetc和getchar

#include

int fgetc(FILE *stream);

int getc(FILE *stream);

int getchar();

int fputc(int c FILE *stream);

int putc(int c,FILE *stream);

int putchar(int c);

区别&＃xff1a;fgetc是从文件流中读取下一个字符

getchar则是从标准输入中读取下一个字符&＃xff0c;标准输入可以是我们的终端

fputc与putchar的区别与上面类似&＃xff1b;

本文中的1和2部分从其他地方转载&＃xff0c;在此谢谢了&＃xff0c;

本文只是在本人工作和学习中留下的脚印&＃xff0c;呵呵&＃xff01;