henbf 最近的时间轴更新 henbf 最近的时间轴更新 首先，我还是先来测试一下这个是个什么东西再说 2016-05-16 23:28:18 +08:00
 | henbf互联网 V2EX 第 171040 号会员，加入于 2016-04-28 15:55:54 +08:0013  40  49  |
北京
| Github 现在可以给 Star 创建分类了 2 分享发现 henbf 2021-12-12 00:18:38 AM 最后回复来自 iMusic | 14 |
henbf 最近回复了
294 天前 回复了 zhouyin 创建的主题 分享发现 nodejs Python PHP ruby go perl 处理单个 4 百兆 csv 文件比较 |
@zhouyin ，Node.js 不适合解析 csv ，Python 牛逼
294 天前 回复了 zhouyin 创建的主题 分享发现 nodejs Python PHP ruby go perl 处理单个 4 百兆 csv 文件比较 |
@zhouyin 这中间还要看你对 csv 的每一行进行了怎么样的处理，你用 python 只是一读一写没有任何额外的处理，相当于复制。用 Node.js ，你却把每一行转换成数组，写的时候又把数组转换成字符串，当然慢了。
const { createReadStream, createWriteStream } = require("fs");
const inputPath = "../outpy.csv";
const outputPath = "./test.txt";
const readStream = createReadStream(inputPath, { highWaterMark: 256 * 1024 });
const writeStream = createWriteStream(outputPath, { flags: "a" });
readStream.pipe(writeStream);
readStream.on("end", () => {
console.log("finished");
writeStream.end();
});
readStream.on("error", (err) => {
console.error("Error reading file:", err);
});
writeStream.on("error", (err) => {
console.error("Error writing file:", err);
});
const { createReadStream, createWriteStream } = require("fs");
const inputPath = "../outpy.csv";
const outputPath = "./test.txt";
const readStream = createReadStream(inputPath, { highWaterMark: 256 * 1024 });
const writeStream = createWriteStream(outputPath, { flags: "a" });
readStream.pipe(writeStream);
readStream.on("end", () => {
console.log("finished");
writeStream.end();
});
readStream.on("error", (err) => {
console.error("Error reading file:", err);
});
writeStream.on("error", (err) => {
console.error("Error writing file:", err);
});
294 天前 回复了 zhouyin 创建的主题 分享发现 nodejs Python PHP ruby go perl 处理单个 4 百兆 csv 文件比较 |
@zhouyin 你的写的不对
const { createReadStream, createWriteStream } = require("fs");
const { parse } = require("csv-parse");
const inputPath = "../outpy.csv";
const outputPath = "./test.txt";
const readStream = createReadStream(inputPath);
const writeStream = createWriteStream(outputPath, { flags: "a" });
const parser = parse({ delimiter: ",", from_line: 2 });
readStream.pipe(parser);
parser.on("data", (row) => {
writeStream.write(row.join(",") + "\n");
});
parser.on("end", () => {
console.log("finished");
writeStream.end();
});
parser.on("error", (error) => {
console.error("CSV Parsing Error:", error);
});
const { createReadStream, createWriteStream } = require("fs");
const { parse } = require("csv-parse");
const inputPath = "../outpy.csv";
const outputPath = "./test.txt";
const readStream = createReadStream(inputPath);
const writeStream = createWriteStream(outputPath, { flags: "a" });
const parser = parse({ delimiter: ",", from_line: 2 });
readStream.pipe(parser);
parser.on("data", (row) => {
writeStream.write(row.join(",") + "\n");
});
parser.on("end", () => {
console.log("finished");
writeStream.end();
});
parser.on("error", (error) => {
console.error("CSV Parsing Error:", error);
});
294 天前 回复了 zhouyin 创建的主题 分享发现 nodejs Python PHP ruby go perl 处理单个 4 百兆 csv 文件比较 |
喷 Node.js 之前反思一下自己是不是应该先搞清楚 I/O 和流的基本概念
296 天前 回复了 littleworm 创建的主题 分享创造 「北京陪诊」做了一个专业医院陪诊平台，分享给需要的人 - 北京陪诊服务中心 |
看注释，这网站 Cursor 生成的吧
2024-08-18 22:05:34 +08:00 回复了 lynn1su 创建的主题 DNS 请问我有个腾讯云无忧的 4h8g10m 的轻量云，自建了 dot 和 do，做好了分流，想拿给公司用， 300 个人，轻量云每个月 10m 带宽， 1500g 流量够吗? |
流量 1500G ，带宽 10MB ，就算 24 小时满带宽使用，需要 14.2 天才能用完
Select Language