直接 TXT 按照 hash 划分可以嘛？
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
This topic created in 3867 days ago, the information mentioned may be changed or developed.
Supplement 1 · Apr 5, 2016
 |
moeeducnApr 5, 2016 via iPad
101
[email protected] ，请楼主好心分享一份
|
 |
hongchaApr 5, 2016
102
同 es 楼主好人 [email protected]
|
 |
xngnlnApr 5, 2016
103
同求，楼主好人， [email protected]
|
 |
BooksEApr 5, 2016
104
lz 好人。
[email protected] |
 |
ganclApr 5, 2016
105
这是求种吗? 为什么都留 email
|
 |
keysonaApr 5, 2016
106
|
 |
cstj0505Apr 5, 2016
107
lz 好人，同求一份 tonytao0505@outlookcom
|
 |
thisisvoaApr 5, 2016
108
lz 好人，同求一份 [email protected] @_@
|
 |
dphdjyApr 5, 2016 via Android
109
话说楼上那么要数据的人？要来干嘛？既然没正规用途？为何要要？只是留以备用吗~¯\_( •́ω•̀ )_/¯
|
 |
xlrtxApr 5, 2016
110
100M 条, 400M 字节..是不是多看了一个零
https://transfer.sh/yqU6x/adddb.py |
 |
3dwelcomeApr 5, 2016 via Android
111
@xlrtx
我们也下了资源、一般来说、纯文本 400m,数据量在 1900 万条是合理范围。也许楼主用的是压缩过的特殊格式。 |
|
3dwelcomeApr 5, 2016 via Android
112
对了、我们是按照首字符分组、然后去重复排序、用二分查找的、效率还行。不过数据量要大不少、 400m 应该是很强的压缩技术了。
|
 |
BraidApr 6, 2016
114
多谢楼主，建议看看 http://www.coreseek.cn/，我打算用这个测试下你的 400M 数据
|
 |
northislandJun 27, 2016
116
一直怀疑字符串 hash 会占额外的空间，但一直没摸到 hash 的瓶颈。
曾经用 python hash 索引过 20m 数量的文件名，木有问题～～ 楼主 100m ，能给个反馈么？ |
Select Language