数据文件 criteo_sample.txt

Open zhijiejia opened this issue 3 years ago • 3 comments

Please refer to the FAQ in doc and search for the related issues before you ask the question.

Describe the question(问题描述) 请问，criteo_sample.txt 这个文件可以提供吗，现在criteo数据集，文件有11G，太大了，本地打不开，网上也没找到criteo_sample.txt 的资源

Mar 28 '23 02:03 zhijiejia

https://deepctr-torch.readthedocs.io/en/latest/Examples.html

ok，i got it.

Mar 28 '23 03:03 zhijiejia

请问如果要跑criteo原来的数据集，要怎么改写？太大了，等加载完所有数据直接卡掉了，运行不了。。。

Feb 22 '24 01:02 OPilgrim

请问如果要跑criteo原来的数据集，要怎么改写？太大了，等加载完所有数据直接卡掉了，运行不了。。。

分批读取，一个batch一个batch地读取&训练模型，不用把全量数据集一次性读取到内存里

May 05 '25 12:05 zanshuxun