Lua的文件操作

先简单介绍一下被迫使用Lua的IO的情境:

游戏支持玩家自定义上传头像,在排行榜中会显示玩家列表(包括本服、跨服),原有的做法是先检测CCUserDefault中是否存在指定图片的key以及它的状态。然后在下载头像、下载完成后设置对应的状态。这样导致的一个问题就是CCUserDefault的读写完全失效了。整个游戏下载的补丁包判断和其它判断就完全失效了,不得卸载游戏后重装。个人目前的推测是由于多线程引起的,暂时没有有效的依据

下载头像使用的是libcurl,嗯,又是它,在做项目这么久的过程中,发现它其实有很多地方比较坑。其中有一点我一直没搞明白,同样的一样地址,系统自带的浏览器(IOS、Android均支持)就能正常返回,而游戏中使用libcurl去下载就是死活返回errcode 28 (CURLE_OPERATION_TIMEDOUT),libcurl我设置的是60秒超时,绝对足够了

 

之后我做了优化,在设置自定义头像的时候,先检测本地是否有该文件,如果有直接就设置了,如果没有就放置在加载队列中,等下载完成后再设置头像,只开一条线程去下载图片。(同一张头像的url只请求一次,也避免对CCUserDefault的读写操作)。

 

通过libcurl下载一个“头像id.jpg.partial”的文件,然后下载完成重新写一个“头像id.jpg”的文件。在下载完成的时候,只做了简单的一个文件大小判断,如果文件小于300B就认为它是有问题的,直接删除相应的文件

-- filePath为当前下载完成的临时头像文件路径local targetIconUrl = string.gsub(filePath, ".partial", "") local inpFile = io.open(filePath, "rb")local outFile = io.open(targetIconUrl, "wb") if inpFile ~= nil then    -- 最大8KB的内存    local buffSize = 2^13    while true do         local bytes = inpFile:read(buffSize)        if not bytes then            break        end

        outFile:write(bytes)    end

    inpFile:close()end

-- 获取下载icon的大小if outFile ~= nil then    local current = outFile:seek()    local fileSize = outFile:seek("end")    outFile:seek("set", current)

    cclog("==> targetIconUrl : "..tostring(targetIconUrl)..", fileSize : "..tostring(fileSize))

    outFile:close()

    -- 小于300字节均认为不正常的数据    if fileSize < 300 then        FileUtil:DeleteFile_(filePath)        FileUtil:DeleteFile_(targetIconUrl)

        self:DownloadNextIconHandler()        do return end    endend

本来,直接调用对应的FileUtil中的FileRename方法就可以实现文件的重命名,但是线上的版本没有导出相应的方法,导致目前只能通过Lua的IO来实现。

最近再看lua的源码时,才真正意识到luaconf.h中定义的 LUAI_MAXCSTACK 是 cclosure的upvalue上限,而lua内存上限似乎没有找到明确的代码。

而file:read调用的是liolib.c

 

底层通过调用fread方法来获得文件的内容,默认每次最多读取512(LUAL_BUFFERSIZE的值)

 

然后调用file:seek(“end”)来获取文件大小

底层调用feek方法来实现

 

本以为到这里就结束了,实际上我遇到另外一个问题。如果头像因审核问题被删除了,导致404,结果底层libcurl方法没有判断http status code,直接判断CURLcode的值是否为CURLE_OK,导致将得到的文件直接写入了。但我从崩溃的日志上得到的信息是,小米4这台设备上获得的文件大小为18378

之后就直接报

invalid address or address of corrupt block 0x7c0eaa40 passed to dlfree

 

之后我修改了libcurl下载文件的代码,但要等下次打整包的时候才能用上

 

把不是jpeg的图片直接对CCSprite进行路径赋值的时候就over了,所以需要一个检测文件是否为jpeg的方法

-- 判断资源是否为jpgfunction PCUtils:CheckIsJpeg(filePath)    local isJpeg = false

    if FileUtil:CheckFileExistWithFullPath(filePath) then        local inpFile = io.open(filePath, "rb")        -- 读取前三位        local bytes = inpFile:read(3)        if bytes then            local fileHeadIden = ""            for _, b in ipairs{string.byte(bytes, 1, -1)} do                local val = string.format("%02X", b)                fileHeadIden = fileHeadIden..val            end

            if string.upper(fileHeadIden) == "FFD8FF" then                isJpeg = true            else                cclog("==> filePath : "..tostring(filePath)..", fileHeadIden : "..tostring(fileHeadIden))            end        end

        inpFile:close()    end

    return isJpegend

读取文件的前三位,转换为16进制,然后对比JPEG的头部,判断是否为JPEG格式的文件,这个是我想起自己之前写过的一篇文章《node.js获取图片文件的真实类型

 

文件一些方法和代码,比如为何是r + b,以及2^13(8KB内存)这种技巧,都是参考《Lua程序设计 第二版》第21章  I/O库,网上应该有中文版的PDF下载,自行搜索吧…

 

本文参考:

lua cclosure 的 upvalue 数量限制

Lua编码的那些陷阱

Lua2.4 内存分配 mem.c

时间: 07-20

Lua的文件操作的相关文章

lua基础【五】I/O文件操作

--[[ lua文件操作相关I/O ]]-- --可以规定在特定目录下打开一个文件,如果该文件不存在的话, --lua会帮助我们在你规定的目录下创建这个文件,前提是该目录要存在 --[[ 同时我们应该掌握写入文件的模式: 对以下写入模式进行说明: "r" 模式:读模式(该模式下,只允许对文件进行读取内容,不容许写入) "w":写模式(允许对文件进行写入,上次的文件内容会因为本次的写入而被替换掉) "a":添加模式 "w+":更

Lua之文件I/O

Lua 文件 I/O Lua I/O 库用于读取和处理文件.分为简单模式(和C一样).完全模式. 简单模式(simple model)拥有一个当前输入文件和一个当前输出文件,并且提供针对这些文件相关的操作. 完全模式(complete model) 使用外部的文件句柄来实现.它以一种面对对象的形式,将所有的文件操作定义为文件句柄的方法 简单模式在做一些简单的文件操作时较为合适.但是在进行一些高级的文件操作的时候,简单模式就显得力不从心.例如同时读取多个文件这样的操作,使用完全模式则较为合适. 打

Python 文件操作

操作文件时,一般需要经历如下步骤: 打开文件 操作文件 一.打开文件 文件句柄 = open('文件路径', '模式') 打开文件时,需要指定文件路径和以何等方式打开文件,打开后,即可获取该文件句柄,日后通过此文件句柄对该文件操作. 打开文件的模式有: r,只读模式(默认). w,只写模式.[不可读:不存在则创建:存在则删除内容:] a,追加模式.[可读: 不存在则创建:存在则只追加内容:] "+" 表示可以同时读写某个文件 r+,可读写文件.[可读:可写:可追加] w+,写读 a+,

python基础:python循环、三元运算、字典、文件操作

目录: python循环 三元运算 字符串 字典 文件操作基础 一.python编程 在面向过程式编程语言的执行流程中包含: 顺序执行 选择执行 循环执行 if是条件判断语句:if的执行流程属于选择执行:if语句有三种格式,如下: 在多分支的if表达式中,即使多个条件同时为真,也只会执行一个,首先测试为真: 选择执行 单分支的if语句 if CONDITION: 条件为真分支 双分支的if语句 if CONDITION 条件为真分支 else 条件不满足时分支 多分支的if语句 if CONDI

python文件操作

文件操作:os.mknod("test.txt")        创建空文件fp = open("test.txt",w)     直接打开一个文件,如果文件不存在则创建文件 关于open 模式: w     以写方式打开,a     以追加模式打开 (从 EOF 开始, 必要时创建新文件)r+     以读写模式打开w+     以读写模式打开 (参见 w )a+     以读写模式打开 (参见 a )rb     以二进制读模式打开wb     以二进制写模式打

Python基础(六) 基础文件操作

今天学习python下对文件的基础操作,主要从open函数.File对象的属性.文件定位.简单操作.举例说明几个步骤开始学习,下面开始进入今天的主题: 一.open函数介绍 open函数主要是打开一个文件,创建一个file对象,相关的方法可以调用它进行读写 . 语法格式如下: 1 2 3 file object = open(文件名,打开文件的模式) file object  = with open (文件名,打开文件的模式) as 变量名 两种语法格式的不同在于下面这种方法不用输入f.clos

小何讲Linux: 基本文件操作和实例

文件操作的基本概念参见博客: 小何讲Linux: 底层文件I/O操作 1.  函数说明 open()函数:是用于打开或创建文件,在打开或创建文件时可以指定文件的属性及用户的权限等各种参数. 所谓打开文件实质上是在进程与文件之间建立起一种连接,而"文件描述符"唯一地标识着这样一个连接 close()函数:是用于关闭一个被打开的文件.当一个进程终止时,所有被它打开的文件都由内核自动关闭,很多程序都使用这一功能而不显示地关闭一个文件. read()函数:是用于将从指定的文件描述符中读出的数据

C语言中的文件操作---重定向操作文件

先说个题外话,文件操作以及字符串与字符深入处理(就是那些什么puts(), getchar()什么的)是本人深入认识C++最后的两座大山.而今天先把重定向文件操作解决掉. 输入输出重定向恐怕是文件I/O操作中最简单的方法了,具体用法是现在main函数的开头加入两条语句,例如: freopen("D:\\input.txt", "r", stdin); freopen("D:\\output.txt", "w", stdout)

文件操作

1.C文件操作 2.c++文件操作 3.MFC文件操作:CFile是MFC的文件操作基本类,它直接支持无缓冲的二进制磁盘I/O操作,并通过其派生类支持文本文件.内存文件和socket文件. Visual C++处理的文件通常分为两种: 文本文件:只可被任意文本编辑器读取ASCII文本. 二进制文件:指对包含任意格式或无格式数据的文件的统称. 1.定义文件变量 定义文件变量格式:CStdioFile 文件变量: 例如,定义一个名称为f1的文件变量,语句如下:CStdioFile f1; 2.打开指