hadoop - 如何从日志文件查看/删除控制字符

我将日志文件从snort手动上载到hadoop，当我在hadoop中打开它时，它以这种未知格式显示:“...”当我在vi中打开它时，它以这种方式显示:º^ _'^ @ ^ @ ^ A ^ A ^ H $^ @ ^OàQ^FÉ-ü^ W ^ C ^ C ^Bô^ @ ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ G /〜f¬!®x^ _5 ^ N©^TÓb$^ Q5¦9 ^ [ÍjEñ 2×@£，æcÖj Ãüá^Dá^ A％^B¯·B？²* ́ýµ fÐvÈ^ETi͹m ^BOæyá5«ÕÝ8S¨>à^^ûÝ^ T üF〜ù X 4 ^Oá％·Ú3½^ K ^Bdº rT K ÅÌÄ_˱^_Ð^ W ^ OF +¬ß+ _6 ^Tÿ!L>²^ G S] ^OüsK^ QzY ^ R]òß^D¯§$^Aì＃_Öv_Ú]ì^ Z + 2»8 låñ/ ^ Ov $î·N / e *7ôø/yâ| x ^ T ©L Ulç(óõ^ R。÷Ë“ÔüB ^^ E3 ^ Q ²mdRêúÝýÀóàzcr^ Sa0 ^ Q ^ LS ïü{DJ¬»zÉ÷ð½Cxè^^ q ^ S Ó？´üÓv ^LAâ3âò$ ¸Æ(ÖÃ)óI65^^®| ^ Hnp〜^？$N¾ök\，ü«ßàÌ)^Bò£b ^Qªãö ûóþ¿^ põyã+ ^^^^Ü^ @} o9“W ·^ U MϽ:ÕuGA。^ \ ^ RR ^ Q ^ X»æ ñÀóð; ^ T4IJ ^WÅÝ ^ N!^ºV {QYÁ0¸^ Z ^ú^ T ^ U ^ [Nù¤JuCÐ 0)N6å¾í'ᡨu =½tݧ¨Dºÿ ^PÓ^ K9 5Ègõ8，»dÊÀA§ä^ R + ^Pɺ^ Q3(°QQÚIFÉ^Nø ÈÚ4gçTg9²iÛ·Ñ1 ®^ OMu ^O²^YßÙ+ ^XÂ， ^ZÊë8h +ú^ @ ％Úà \¹ï##Lú y {ý !^ Z'bH ^ C ù÷8;¾d =Aæ©}¸0LWß'L) × ^ @Ï+ÈÔÓ×^ Na ^ WG6 ^ G iūûÇd“{Ͻ¬ ^^^ M = 2H r5ì1^ZÐ^ A ^WÌ＃t'ý ^ Z ^ W¤öR´ÿ (ågójîÓßÈ+ ^ _}ÆJ XSJZNµãµ“ñq Ö(¤-^SpÒ6 b 1ÅiU½o pb ã| ^Bc¾g2^FÅC¶a÷¡ ^ _Ï，¥g $Å*yªu^G½'îwátA^ T @Ë6_Xá ^ L ^ @ y ^ @ ^ @ ^ @ y ^ @ ^ @ ^ @HZ¶^úMÄn^«2´^ H ^ @E ^ @ ^ @ k ^ @ ^ @@ ^ @？^Q¯ÄÀ¨^ E ^EÀ¨^ Eh ^ @ 5 @÷^ @ WU t @ ^ @ ^ A ^ @ ^ B ^ @ ^ @ ^ @ ^ @ ^ Cwww ^ Hfacebook ^ Ccom ^ @ ^ @ ^ A ^ @ ^AÀ^ L ^ @ ^ E ^ @ ^ A ^ @ ^ @ ^ K ^ @ ^ Q ^ Istar-mini ^Dc10rÀ^PÀ。^ @ ^ A ^ @ ^ A ^ @ ^ @ ^ @ ^ L ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ ^ @HZ¶^úMÄn^«2´^ H ^ @ E ^ @ ^ @ w ^ @ ^ @@ ^^？^Q¯¸À¨^ E ^EÀ ¨^ Eh ^ @ 5 <89>^@c¹n<õ<81><80>^@^A^@^B^@^@^@^@^Cwww^Hfacebook^Ccom^@^@^\^@^AÀ^L^@^E^@^A^@^@^K<89>^@^Q^Istar-mini^Dc10rÀ^PÀ.^@^\^@^A^@^@^@^]^@^P*^C(<80>ñ^\^@<83>úΰ^L^@^@%Þ6_<9a>Xÿ§^M^@B^@^@^@B^@^@^@HZ¶^úMÄn^_«2´^H^@E^@^@4¥^Y@^@T^F?i^_^M]$À¨^Eh^A»<8c> 3Ȩ^S<96><96>å¾<80>^P^BtU¿^@^@^A^A^H$^FÊ^N<91>^@^OàQ6_<9a>X6ª^M^@l^@^@^@l^@^@^@HZ¶^úMÄn^_«2´^H^@E^@^@^¥^Z@^@T^F?>^_^M]$À¨^Eh^A»<8c> 3Ȩ^S<96><96>å¾<80>^X^BtØÜ^@^@^A^A^H$^FÊ^N<91>^@^OàQ^W^C^C^@%?@´ò5ãù<99>eË<98>óQ´ÚA<97>&µuî^NÞ^P:/×:âù7é<8e>,º¡Ñ6_<9a>XCª^M^@B^@^@^@B^@^@^@Än^_«2´HZ¶^úM^H^@E^@^@4h©@^@@^F<8f>ÙÀ¨^Eh^_^M]$<8c> ^A»<96><96>è·3Ȩ=<80>^P$ºJC^@^@^A^A^H$^@^Oàd^FÊ^N<91>6_<9a>X^U^N^@B^@^@^@B^@^@^@HZ¶^úMÄn^_«2´^H^@E^@^@4¥^[@^@T^F?g^_^M]$À¨^Eh^A»<8c> 3Ȩ=<96><96>è·<80>^P^B^?Rd^@^@^A^A^H$^FÊ^N¾^@^OàQ6_<9a>X¨j^N^@}^A^@^@}^A^@^@HZ¶^úMÄn^_«2´^H^@E^@^Ao¥^\@^@T^F>+^_^M]$À¨^Eh^A»<8c> 3Ȩ=<96><96>è·<80>^X^B^?í^Z^@^@^A^A^H$^FÊ^N¾^@^OàQ^W^C^C^A6?@´ò5ãù<9a>a%YRimY78#<8c><95>$Wn<9b><85> 5^^í^?Âì<^F.÷óÉ^MØ<88>¯è<8c>deGÆ uR{û{Hì^R^Fv^]A¯<9b>öT¥^DF"úæ!·<90>º¤7I^Vy^CÏåºT^WÇé<ǧÐbÛ¦¾^@<85>^EãÞ"l^QiÂ<89>¼½^ü×A.ç1m²ÁÍ^]ùJªMwØ-?{<83>A0Bü~Ô½°ÜæÈú<9f>ðëªV<8d>^EA^Wú^Q*C+9ÙPÍy^Z><92>ó^[E¬y^]gótAº^E<8c>^MÕâ><9d>aÀ¶^@ñ>@«àÖç<97> a¼^E¤À¶Û½º5úé<8e>«Ñ^ @ Nw µ {ÆãÂM5å8＆〜^ E »Áh·ÌÙ¼^ [¦ ¢v ^ @àøo/ of C ^ [KGGH ^S0þü^QÃÕêÈ＃Ú ^ B »¼c^ GRv»(Ñ°»·Yñ^ KT Po ^ \ ôÑ+×J¨ 2F6 X¾j^ N ^ @ B ^ @ ^ @ ^ @ B ^ @ ^ @ ^ @Än^«2´HZ¶ ^úM^ H ^ @ E ^ @ ^ @4hª @ ^ @@ ^ F ØÀ¨^ Eh ^^ M] $ ^ A» è·3È©x ^ P $¸Hð^ @ ^ @ ^ A ^ A ^ H $^ @ ^Oàq^FÊ^N¾9_ XFX ^ D ^ @ L ^ @ ^ @ ^ @ L ^ @ ^ @ ^ @Än^«2´HZ¶ ^úM^ H ^ @ E ^ @ ^ @> ^ Y¯@ ^ @@ ^^ Q BÀ^EhÀ¨^ E ^ E»= ^ @ 5 ^ @ *9à ¦ ^ A ^ @ ^ @ ^ A ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ ^ Cwww ^ Hfacebook ^ Ccom ^ @ ^ @ ^ A ^ @ ^ A9 XÿY^ D ^ @ L ^ @ ^ @ ^ @ L ^ @ ^ @ ^ @Än^«2´HZ¶ ^úM ^ H ^ @ E ^ @ ^ @> ^ Y°@ ^ @@ ^ Q AÀ¨^EhÀ¨^ E ^ E ^Uá^ @ 5 ^ @ * C $％^ A ^ @ ^ @ ^ A ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ Cwww ^ Hfacebook ^ Ccom ^ @ ^ @ ^ \ ^ @ ^ A9 X“^ D ^ @ª^ @ ^ @ ^ @ ^ @ª^ @@ ^ @ ^ @Än^«2´HZ¶ ^úM^ H ^ @ E ^ @ ^ @ h«@ ^ @@ ^ F oÀ¨^ Eh ^^ M] $ ^ A » è·3È©x ^ X $º，6 ^ @ ^ @ ^ A ^ A ^ H $^ @ ^Oâ°^F¾^N¾^ W ^ C ^ C ^ @ c ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ ^ @H²ñÀ^ QU: ^ L M8Ïãî·Àº D íZ©Tõà。$ [À^Xðo·^ Wg ^ E ^^Ú^ N ^¬ / z>Ëo¾t^UÕ^P'õR^FÑþÜâ^TjÚ Df( 6 ¯GØúî％^X6Xòô^K¤»b `^!9 X ^^ b ^ D ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ HZ¶^úMÄn^«2´^ H ^ @ E ^ @ ^ @ w ^ @ ^ @@ ^ @？^QQ¸À¨^ E ^EÀ¨^ Eh ^ @ 5»= ^ @cÊø ¦ ^ @ ^ A ^ @ ^ B ^ @ ^ @ ^ @ ^ @ ^ Cwww ^ Hfacebook ^ Ccom ^ @ ^ @ ^ A ^ @ ^AÀ^ L ^ @ ^ E ^ @ ^ A ^ @ ^ @ ^ K ^ @ ^] ^ Istar-mini ^ Dc10r ^ Hfacebook ^ Ccom ^ @À。^ @ ^ A ^ @ ^ A ^ @ ^ @ ^ @:^ @ ^ D ^^ M] $ 9 _ X c ^ D ^ @ ^ @ ^ @ ^ @ ^ @ ^ @ ^ @HZ¶^úMÄn^«2´^ H ^ @ E ^ @ ^ @ ^ @ ^ @@ ^^？^ Q́À¨ ^ E ^EÀ¨^ Eh ^ @ 5 ^Uá^ @ o!^ K $％ ^ @ ^ A ^ @ ^ B ^ @ ^ @ ^ @ ^ @ ^ Cwww ^ Hfacebook ^ Ccom ^ @ ^ @ ^ \ ^ @ ^AÀ^ L ^ @ ^ E ^ @ ^ A ^ @ ^ @ ^ K ^ @ ^] ^ Istar-mini ^ Dc10r ^ Hfacebook ^ Ccom ^ @À。^ @ ^ \ ^ @ ^ A ^ @ ^ @ ^ @ ^ [^ @ ^ P * ^ C(ñ^ \ ^ @ úΰ^ L ^ @ ^ @％Þ9 X d ^ D ^ @？^ C ^ @ ^ @？^ C ^ @ ^ @Än^«2´HZ¶ ^úM^ H ^ @ E ^ @ ^C1h¬ @ ^ @@ ^ F ÙÀ¨^ Eh ^^ M] $ ^ A» é^_3È©x ^ X $º ^ @ ^ @ ^ A ^ A ^ H $可能是什么问题？我应该在hadoop中使用特定的文件格式吗？ (adsbygoogle = window.adsbygoogle || []).push({}); 最佳答案 您的文件包含control characters，编辑器以不同的方式显示控制字符。在vi编辑器中打开文件，输入命令:set list。它会显示所有控制字符，然后用人类可读的字符替换控制字符。您可以尝试在vi中替换控制字符(％x001，％x002，％x00)::%s/\%x001/,/g或使用tr命令替换tr'\ 001''，'输出文件名 (adsbygoogle = window.adsbygoogle || []).push({});