前言
本文是该专栏的第42篇，后面会持续分享python的各种干货知识，值得关注。
在项目工作中，难免会遇到需要你通过python去读取100G甚至超过100G的数据文件。对于小数据的文件来说，相信很多同学都可以轻松解决。但对于大数据文件，类似读取100G的数据文件甚至会对电脑的性能产生一定的影响。
而可能有同学会问，可以将100G的数据文件拆分成多个小文件进行分批次的读取，是不是也可以实现呢？该种方法虽然是可行的，但是对于追求效率的需求者来说，这仅仅只是退而求其次的方法，并不是最佳选择。
那么，如果想要快速通过python读取100G的数据文件，具体需要怎么做呢？废话不多说，跟着笔者直接往下看正文详细内容。（附完整代码）
正文
在python中读取数据文件的话，有多种方法。而本文，笔者将着重介绍针对读取大文件的方法，具体可以按照项目需求来使用。
通常情况下，大多数同学都见过甚至使用过该种方法。
这种方法比较常见，它是使用python的标准文件读取流程，即使用open()函数来打开文件。接下来，