因此,我写了一个小脚本,将文本文件作为输入,读取每一行并尝试将其验证为电子邮件。如果通过,则将行写入新的(“干净”)文件,如果不通过,则将其删除空格并尝试再次对其进行验证。现在,如果这段时间过去了,它将把该行写入新文件,如果失败,它将忽略该行。
事情就是这样,我的脚本可能会将重复的电子邮件写入输出文件。我应该如何解决这个问题,并在写入之前检查输出文件中是否存在重复项?
以下是相关代码:
// create reading and writing buffers
scanner := bufio.NewScanner(r)
writer := bufio.NewWriter(w)
for scanner.Scan() {
email := scanner.Text()
// validate each email
if !correctEmail.MatchString(email) {
// if validation didn't pass, strip and lowercase the email and store it
email = strings.Replace(email, " ", "", -1)
// validate the email again after cleaning
if !correctEmail.MatchString(email) {
// if validation didn't pass, ignore this email
continue
} else {
// if validation passed, write clean email into file
_, err = writer.WriteString(email + "\r\n")
if err != nil {
return err
}
}
} else {
// if validation passed, write the email into file
_, err = writer.WriteString(email + "\r\n")
if err != nil {
return err
}
}
}
err = writer.Flush()
if err != nil {
return err
}
最佳答案
您可以将Go内置 map 用作这样的集合:
package main
import (
"fmt"
)
var emailSet map[string]bool = make(map[string]bool)
func emailExists(email string) bool {
_, ok := emailSet[email]
return ok
}
func addEmail(email string) {
emailSet[email] = true
}
func main() {
emails := []string{
"duplicated@golang.org",
"abc@golang.org",
"stackoverflow@golang.org",
"duplicated@golang.org", // <- Duplicated!
}
for _, email := range emails {
if !emailExists(email) {
fmt.Println(email)
addEmail(email)
}
}
}
这是输出:
duplicated@golang.org
abc@golang.org
stackoverflow@golang.org
您可以在The Go Playground尝试相同的代码。
关于go - 在写入文件之前检查重复项的方法?,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/38805269/