V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
abcbuzhiming
V2EX  ›  PHP

PHP 下有啥东西能解决对大 xls、xlsx 文件的写入问题的吗

  •  
  •   abcbuzhiming · 2016-11-16 09:39:18 +08:00 · 3858 次点击
    这是一个创建于 2724 天前的主题,其中的信息可能已经有所发展或是发生改变。
    现在有个需求,必须输出 xls 或 xlsx 因为 csv 没有样式。
    PHPexcel 这个东西的最大弱点,在于它写入一个 excel 文件之前,必须把这个文件读入内存,不能像写文本那样,简单的续写就行了,则就导致这玩意处理不了大文件,当一个文件本身就很大的时候,载入就要花很长时间。因为内容的列非常多,而且样式复杂,所以大约在 10000 行的时候内存就要爆炸。爆炸还是其次,关键是分批写入随着文件越来越大会变得越来越慢
    16 条回复    2016-11-18 13:45:01 +08:00
    knightdf
        1
    knightdf  
       2016-11-16 09:46:25 +08:00
    头像不错
    R18
        2
    R18  
       2016-11-16 09:48:43 +08:00 via Android
    我记得可以设置缓存区
    setonfocus
        3
    setonfocus  
       2016-11-16 09:49:14 +08:00
    这个需求不应该用 php 来解决吧
    demoxu
        4
    demoxu  
       2016-11-16 09:52:30 +08:00
    phpexcel 我记得能设置硬盘缓存来替代默认的内存缓存;然而好久不用,不知道设置了。上 github 找找吧
    shoaly
        5
    shoaly  
       2016-11-16 10:06:08 +08:00
    可以折中一下, 用 php 写入到数据库, 另外找个 python 从数据库读取 写到 excel 里面去
    abcbuzhiming
        6
    abcbuzhiming  
    OP
       2016-11-16 10:08:51 +08:00
    @R18 如何设置呢,缓存区的原理是啥
    fzxml
        7
    fzxml  
       2016-11-16 10:13:21 +08:00
    用 python 吧
    saymoon
        8
    saymoon  
       2016-11-16 10:13:33 +08:00
    oisc
        9
    oisc  
       2016-11-16 10:17:18 +08:00
    可以通过 Excel Driver 用 ODBC 的方式读写 xls 、 xlsx 文件,不过你需要 专门一台 Windows 来做 ODBC 源。
    mhycy
        10
    mhycy  
       2016-11-16 10:30:27 +08:00
    XLS 是结构化数据,在对象生成的过程中必定需要耗费大量的内存存放数据,最后再输出成 XLS 文件
    建议加内存,能简单用硬件解决的问题不应增加程序复杂度
    Arnie97
        11
    Arnie97  
       2016-11-16 10:35:55 +08:00 via Android
    如果 Excel 本身不存在这个问题,你可以装个 Excel ,然后通过 COM / ODBC 之类调用。
    yasin
        12
    yasin  
       2016-11-16 15:27:08 +08:00
    没什么好的办法,我们后来改成 nodejs 处理这种任务。 6 万条数据 10 秒内导出。
    lygmqkl
        13
    lygmqkl  
       2016-11-16 23:18:37 +08:00 via iPhone
    phpcli 或者 python 异步完成即可
    cenxun
        14
    cenxun  
       2016-11-17 11:02:30 +08:00
    可以试试这个 https://github.com/mk-j/PHP_XLSXWriter ,比 phpexcel 要好点,官方测评截图 , 地址 http://www.zedwood.com/article/php-excel-writer-performance-comparison
    crossmaya
        15
    crossmaya  
       2016-11-17 13:41:44 +08:00
    可以设置内存缓冲区,使用硬盘,但是速度尼玛贼慢!我现在是 php 生成 json 文件然后使用 python 来做。
    Patrick95
        16
    Patrick95  
       2016-11-18 13:45:01 +08:00
    PHPExcel_CachedObjectStorageFactory::cache_to_discISAM;

    缓存到磁盘。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2493 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 14:05 · PVG 22:05 · LAX 07:05 · JFK 10:05
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.