Jak wprowadzić tekst arabski do mojego kodu Pythona?

mój projekt jest zidentyfikowanie sentyment dodatnie lub ujemne (analiza nastrojów) w języku arabskim, aby wykonać to zadanie użyłem NLTK i Python, gdy wchodzę tweets w arabskiej wystąpi błądJak wprowadzić tekst arabski do mojego kodu Pythona?

>>> pos_tweets = [(' أساند كل عون أمن شريف', 'positive'), 
       ('ما أحلى الثورة التونسية', 'positive'), 
       ('أجمل طفل في العالم', 'positive'), 
       ('الشعب يحرس', 'positive'), 
       ('ثورة شعبنا هي ثورة الكـــرامة وثـــورة الأحــــرار', 'positive')] 
Unsupported characters in input

jak mogę Rozwiąż ten problem?

Źródło

2013-03-04 Manel Ayadi

Czy możesz podać więcej szczegółów na temat swojego systemu? – pram

moim projektem jest zbudowanie zestawu narzędzi do analizy sentymentów dla języka arabskiego, kiedy przeglądałem sieć Znalazłem, że to zadanie jest trudniejsze niż język angielski, znalazłem przykład, który zajmuje się NLTK i pythonem do analizy sentymentu i daje dobry wynik [przykład] (http://www.laurentluce.com/posts/twitter-sentiment-analysis-using-python-and-nltk/), zastanawiam się, czy mogę zrobić to samo dla języka arabskiego –

Przepraszam, ja oznacza, że uruchamiasz się z powłoki interaktywnej lub ze skryptu? Której powłoki Pythona używasz, jaki jest twój system operacyjny, itp. – pram

Twój problem pochodzi z powłoki IDLE. AFAIK IDLE nie zaakceptuje wejścia UTF-8 w trybie interaktywnym.

Proponuję użyć alternatywnych (i lepszych) muszli, takich jak DreamPie lub PythonWin.

Źródło

2013-03-04 17:20:46 pram

są te narzędzia zdolne do analizy sentymentu w języku arabskim (czy jest tam api dla słów stop, classificatio ....)? –

To tylko muszelki. Po prostu przekazują wszelkie instrukcje, które wpiszesz do interpretera Pythona. Używanie dowolnej powłoki, która Ci się podoba, nie stanowiłoby problemu. Oczywiście nadal musisz zainstalować wymaganą bibliotekę (w tym przypadku nltk). – pram

dziękuję, działa z powłoką DreamPie :) –

Istnieje prosty hack, który zwykle wprowadzam UTF-8 do mojego kodu Pythona. Nie wiem, dlaczego to działa, ale akceptuje ciągi znaków Unicode i uruchamia skrypt płynnie po dodaniu tych linii:

#! /usr/local/bin/python -*- coding: UTF-8 -*- 

pos_tweets = [(u' أساند كل عون أمن شريف', 'positive'), 
(u'ما أحلى الثورة التونسية', 'positive'), 
(u'أجمل طفل في العالم', 'positive'), 
(u'الشعب يحرس', 'positive'), 
(u'ثورة شعبنا هي ثورة الكـــرامة وثـــورة الأحــــرار', 'positive')] 

for i in pos_tweets: 
    print i[0], i[1]

Źródło

2013-03-05 03:08:14 alvas

działa teraz, dzięki :) –

...... (= ألعفو – alvas

Jak wprowadzić tekst arabski do mojego kodu Pythona?

Odpowiedz

Powiązane problemy