Nie jesteś zalogowany.
Jeśli nie posiadasz konta, zarejestruj je już teraz! Pozwoli Ci ono w pełni korzystać z naszego serwisu. Spamerom dziękujemy!

Ogłoszenie

Prosimy o pomoc dla małej Julki — przekaż 1% podatku na Fundacji Dzieciom zdazyć z Pomocą.
Więcej informacji na dug.net.pl/pomagamy/.

#1  2008-01-09 08:38:01

  zyga - Użytkownik

zyga
Użytkownik
Zarejestrowany: 2005-08-25

Dzielenie wyrażeń w pliku tekstowym i wrzucanie go do bazy

Witam wszystkich :)

Mam problem i mam nadzieje, że ktoś mi pomoże heh, mianowicie. Mam plik tekstowy (dokładnie log, ze squida), którego chce sobie filtrować i w odpowiednim momencie dodawać do bazy.  Już tłumacze - plik ma następującą strukturę (oto przykład):

1199857805.452    262    192.168.1.123   TCP_CLIENT_REFRESH_MISS/200  4325   GET http://u30.eset.com/nod_upd/update.ver - DIRECT/89.202.149.40 application/octet-stream

Chciałbym powyższy wpis podzielić na siedem części i załadować do bazy do odpowiedniej kolumny, która miała by strukture np:

nr1  nr2  ip   tcp  nr3  metoda   strona

lub ewentualnie jak jest prościej to podzielić to na tyle części ile jest spacji czyli w tym przypadku 9

Problem oczywiście mam z tym, że nie wiem jak to podzielić, żeby poszczególne wpisy, załadować do odpowiednich kolumn. Może to być rozwiązanie w shellu/perlu lub w php. Ma ktoś jakiś pomysł ?? Z góry bardzo dziękuje :)

pozdrawiam


apt-get remove windows ....
apt-get install debian :)

Offline

 

#2  2008-01-09 08:49:18

  Gryzon - Użytkownik

Gryzon
Użytkownik
Skąd: Trójmiasto
Zarejestrowany: 2007-06-23

Re: Dzielenie wyrażeń w pliku tekstowym i wrzucanie go do bazy

Jeżeli może być to zrobione w PHP, to możesz wykonać następującą czynność:

Kod:

<?php

$text="1199857805.452    262    192.168.1.123   TCP_CLIENT_REFRESH_MISS/200  4325   GET http://u30.eset.com/nod_upd/update.ver - DIRECT/89.202.149.40 application/octet-stream";

$oko = explode("    ",$text);

print_r($oko);

?>

Oczywiście jeżeli w pliku jest więcej takich wersów, to musisz zastosować pętle, np. for


"Nie ma rzeczy niemożliwych, są tylko takie, których człowiek nie nauczył się jeszcze robić"
A. Einstein

Offline

 

#3  2008-01-09 18:25:46

  zielkam - były zielony_83 :)

zielkam
były zielony_83 :)
Skąd: Zawiercie
Zarejestrowany: 2006-05-06
Serwis

Re: Dzielenie wyrażeń w pliku tekstowym i wrzucanie go do bazy

w shellu też prosta sprawa robić cut i wrzucać do sql, tylko z wydajnością takiego czegoś może być problem, dla każdej linijka loga siedem insertów :/
EDIT
A no i jeszcze trzeba jakiś kawałek sprawdzania, żeby nie duplikował wpisów, albo select i porównywanie tego z kolejnymi elementami, albo (i to chyba lżejsze) oznaczać w logu linijki już dodane (lub koniec ostatniej operacji dodawania) .

Ostatnio edytowany przez zielony_83 (2008-01-09 18:34:29)


Zostałeś zarejestrowany jako użytkownik #416423 przez.. :mrgreen:
##
FluxboxPL | Mój Lepszy Świat | UnixyPL | Telenia VOIP dla ISP
JID: zielony@jabster.pl

Offline

 

#4  2008-01-09 20:48:27

  kuchar - Użytkownik

kuchar
Użytkownik
Skąd: Warszawa
Zarejestrowany: 2005-11-16
Serwis

Re: Dzielenie wyrażeń w pliku tekstowym i wrzucanie go do bazy

w perlu możesz użyć funkcji split, przykład:

Kod:

($nr1, $nr2, $ip, $tcp, $nr3, $metoda, $strona) = split(/\s*/, $linijka);

Linux Registered User # 406343

Routing protocols enable routers to route routed protocols :)

Offline

 

#5  2008-01-09 22:43:15

  bercik - Moderator Mamut

bercik
Moderator Mamut
Skąd: Warszawa
Zarejestrowany: 2006-09-23
Serwis

Re: Dzielenie wyrażeń w pliku tekstowym i wrzucanie go do bazy

w awk:

Kod:

awk '{printf("INSERT INTO ... %s %s %s %s", $1, $2, $3, $4);}' < plik > plik.sql

dla kazdej linijki w $1 $2 $3 itd laduja pola rozdzielane ciagami bialych znakow ...


"Wszyscy wiedzą, że czegoś zrobić nie można. Ale przypadkowo znajduje się jakiś nieuk, który tego nie wie. I on właśnie robi odkrycie." (A.Einstein)

Offline

 

#6  2008-01-10 12:38:18

  zyga - Użytkownik

zyga
Użytkownik
Zarejestrowany: 2005-08-25

Re: Dzielenie wyrażeń w pliku tekstowym i wrzucanie go do bazy

dziękuje wszystkim za odpowiedzi :)

Pozdrawiam


apt-get remove windows ....
apt-get install debian :)

Offline

 

Stopka forum

Powered by PunBB
© Copyright 2002–2005 Rickard Andersson
To nie jest tylko forum, to nasza mała ojczyzna ;-)