经典 XX 考验 XX

blue

这个时间点了，肯定等 pro9 了

@weiwoxinyou
@winglight2016
好像跟 jupyter 有关系。我用的是 vscode 和 jupyter interactive 去 print 数据，如果放在 CMD 里运行，是不会占用内存的。

完整代码如下：


def parse_and_remove(filename, path):
path_parts = path.split('/')
doc = iterparse(filename, ('start', 'end'))
# Skip the root element
next(doc)

tag_stack = []
elem_stack = []
for event, elem in doc:

if event == 'start':
tag_stack.append(elem.tag)
elem_stack.append(elem)
elif event == 'end':
if tag_stack == path_parts:
yield elem
elem.clear() ##这里加上 elem.clear()，内存占用几乎不变，可以完成任务；如果去掉的话，内存占用会越来越大直至 crash

try:
tag_stack.pop()
elem_stack.pop()
except IndexError:
pass


def count_stats(filepath, filename):
start = time.time()
print('\nStart processing file ', filepath)
data = parse_and_remove(filepath, 'Job')

results = []
count = 1

for job_node in data:
continue ##即使这里什么都不做，内存占用也会越来越大


print 的程序如主楼所示。内存占用越来越大直至 crash




谢谢二位

@winglight2016
@weiwoxinyou

@westoy 谢谢大佬，爬取 XML 文件的时候，也需要 append 到 list ，所以就需要手工清理一遍，也就是 elem.clear()。只有不输出的话，generator 相对于 list 的优势才是内存管理，我理解的对吧？

@solemelo 扯淡，有没有可能是你只看得懂中文？

淘宝买个学生认证，可行吗

为什么要炒币呢？巴菲特都说不要幻想暴富，老老实实定投纳斯达克就完事。

酷安的 windows11 区很多讨论 dev 的，v2 比较少

@hyvesel 你的主动显示是不是也有问题？淘宝修一下吧，距离传感器有问题

有在用 insider 的吗，已经 1.65 了

加油兄弟！

节哀

Anne Pro2 ，最强量产 60%

V 站的老哥们为啥不开个美股账户啊？其实没那么复杂，买美股血赚。

我还在用 9980HK ，感觉很够用了

这种人不怕生了孩子没屁眼吗

这种人怎么他妈的不去死啊