PHP pobrać ponad 20000 wiadomości IMAP

Question

Próbuję wyeksportować kilka skrzynek pocztowych do bazy danych. Mój obecny skrypt połączy IMAP i zapętnieje wszystkie wiadomości. Jednak przy większych skrzynkach pocztowych to nie zadziała i zwolni lub nawet się zatrzyma.

Chodzi o to, aby codziennie uruchamiać skrypt, aby "skopiować" wszystkie wiadomości, które nie są jeszcze w bazie danych do bazy danych. Co jest najlepszym sposobem, aby pobrać duże ilości wiadomości e-mail (20k maile rozłożone na około 40 - 50 folderów).

W końcu będzie to wymagać pracy z jednego serwera, aby skanować setki lub nawet tysiące kont dziennie (więc wyobraź sobie ilość danych). Przechuje on pocztę (uid i subject) w bazie danych i utworzy pakiet, który będzie przechowywany na serwerze danych (musi więc również pobrać załączniki).

Answer 1

Czy używasz imap_ping?

imap_ping() wysyła sygnał do strumienia, aby sprawdzić, czy nadal jest aktywny. To może odkryć nową pocztę; jest to preferowana metoda okresowego sprawdzania poczty "new " oraz "keep alive" dla serwerów, które mają limit czasu nieaktywności wynoszący .

Inne nich patrzeć: imap_timeoutimap_reopen

rzeczywistości nie jest to metoda zwana reopen sugeruje coś prawda :)

Innym rozwiązaniem, które przychodzi na myśl, jeśli tylko mogą” Wydaje się, że utrzymujesz połączenie, aby wyeksportować dane do formatu mbox i dostać się do niego lokalnie. Może być szybszy w przypadku dużej skrzynki pocztowej i może usunąć problemy z przekroczeniem limitu czasu/połączenia.

Answer 2

Więc chcesz wykonać kopie zapasowe wiadomości e-mail przez IMAP. Dostępne są profesjonalne narzędzia programowe.

Zacznijmy od czegoś prostego: pobieranie wiadomości e-mail dla jednego konkretnego użytkownika z folderu skrzynki odbiorczej. Wymaga to (a) zalogowania się przy użyciu poświadczeń użytkownika, (b) wybrania folderu INBOX i (c) pobrania wiadomości (załóżmy, że znasz już jego UID, czyli 55). Można to zrobić w następujący sposób IMAP (tylko żądania - Odpowiedzi nie pokazano):

01 LOGIN username password 
02 SELECT INBOX 
03 UID FETCH 55 BODY[] 

Każda wiadomość w określonym folderze jest podana UID. Jest to unikalny identyfikator dla wiadomości, która nigdy się nie zmienia - nie może być używana przez żadną inną wiadomość w tym folderze. Nowe wiadomości muszą mieć wyższy identyfikator UID niż poprzednie. Dzięki temu jest to przydatne narzędzie do ustalenia, czy poprzednio pobrano już wiadomość.

Następny krok: spójrzmy teraz na pobieranie wszystkich nowych wiadomości w folderze INBOX. Załóżmy, że jesteś pobierania wiadomości po raz pierwszy, a SKRZYNKA obecnie ma wiadomości z UID 54, 55 i 57. Można pobrać te wiadomości naraz używając polecenia takie jak:

03 UID FETCH 54,55,57 BODY[] 

(You może to zepsuć partiami (np. 30 na raz), jeśli jest dużo do pobrania.) Po wykonaniu tej czynności przechowuje się najwyższy UID pobrany do tej pory.Następnym razem, można sprawdzić UID wyższe niż w następujący sposób:

04 UID FETCH 58:* UID 

To będzie pobierać UID (tylko) dla komunikatów z UID od 58 roku. Jeśli uzyskasz wyniki, pobierz je i ponownie zapisz UID. I tak dalej.

Jest jeden haczyk. Identyfikatory UID komunikatu są poprawne, o ile atrybut UIDVALIDITY folderu (zawarty w odpowiedzi na polecenie SELECT) nie zmienia się. Jeśli to się zmieni z jakiegoś powodu, folder zostanie unieważniony i musisz pobrać wszystkie wiadomości z tego folderu od nowa.

Wreszcie, chcesz rozszerzyć to działanie dla wszystkich folderów dla wszystkich użytkowników. W celu uzyskania wszystkich folderów dla danego użytkownika, należy użyć komendy LIST IMAP:

05 LIST "" "*" 

będzie trzeba wiedzieć poświadczenia dla użytkowników wcześniej i pętli nad nimi.

To jest teoria IMAP stojąca za tym, co musisz zrobić. Wdrożenie go w PHP jest pozostawione jako ćwiczenie.