Problem z wczytaniem kodu strony WEB do AnsiString

[Miroo_007]

Kod: Zaznacz cały

AnsiString tekst = IdHTTP1->Get("http:\\...");

Kiedy wczytuję stronę http:\\ do zmiennej tekst nie pobiera mi całej strony tylko część. Jeżeli usunę część tekstu:

Kod: Zaznacz cały

tekst.Delete(1,100);

To wtedy pojawia się tekst, który nie zmieścił się wcześniej w zmiennej tekst. Przypuszczam, że problem leży przy ograniczeniu pojemności zmiennej tekst. Próbowałem rozwiązać problem tak:

Kod: Zaznacz cały

AnsiString *tekst = new AnsiString;

Jednak wyskakuje w błąd przy linijce:

Kod: Zaznacz cały

tekst = IdHTTP1->Get("http:\\...");

BÅ‚Ä…d: [C++ Error] Unit1.cpp(261): E2034 Cannot convert 'AnsiString' to 'AnsiString *'

[Cyfrowy Baron]

Powinno chyba być http://... a nie http:\\... a jeżeli już to http:\\\\....
Problem nie leży tyle w pojemności zmiennej, lecz raczej w tym, że jeżeli zmienna natknie się na jakiś znak, którego nie potrafi zinterpretować, to przestanie dalej pobierać znaki.

Możesz wczytać pobieraną stronę do obiektu typu TStringList:

Kod: Zaznacz cały

  TStringList *lista = new TStringList;
  lista->Text = IdHTTP1->Get("http:\\...");


tutaj nie powinieneś mieć już problemów z pojemnością.
Sugeruję jednak wczytać pobieraną stronę do obiektu Memo celem sprawdzenia, czy rzeczywiście jest to problem z pojemnością, czy też z jakimiś znakami w systemie UTF-8, Unicode, gdyż zmienna AnsiString nie potrafi wyświetlać znaków 64-bitowych, a tylko 32 bitowe. Na tym forum problem ze znakami Unicode był już poruszany i podawane było jakieś rozwiązanie.

---

W poradzie Wyciąganie adresów URL ze stron internetowych. podałem sposób na wyciąganie adresów, ale jest tam funkcja AnsiString ReadFileURL(AnsiString Url) wczytująca zawartość strony do zmiennej typu AnsiString, posiada ona tą zaletę, że eliminuje wszelkie znaki łamania linii i końca tekstu umożliwiając wczytanie całej strony do jednej zmiennej, więc być może to rozwiązanie będzie lepsze.

[Miroo_007]

Przypuszczałem wcześniej, że problem leży przy pojemności stosu pamięci jaką Windows przydziela dla mojego programu. Mam jeszcze jedno pytanie. Czy istnieje opcja w Indy pozwalająca ściągać plik http nie od początku tylko z określonego miejsca w pliku. Chodzi mi głównie oto aby przyspieszyć odpowiedź serwera ponieważ instrukcja IdHTTP1->Get() bardzo długo zwraca wynik.

[Witold]

Przypuszczam, że problem leży przy ograniczeniu pojemności zmiennej tekst

AnsiString może pomieścić do 2GB.

Mam jeszcze jedno pytanie. Czy istnieje opcja w Indy pozwalająca ściągać plik http nie od początku tylko z określonego miejsca w pliku.

Może to:
IdHTTP->Request->ContentRangeStart
IdHTTP->Request->ContentRangeEnd

[Miroo_007]

Teoretycznie AnsiString może pomieścić dane o pojemności do 2 GB. Ale czy Windows na takie coś pozwala przydzielając pamięć dla programu. Myślę, że rzeczywistość może wyglądać trochę inaczej.
Zapewne dane o pojemność do 2 GB można zrealizować za pomocą instrukcji:

Kod: Zaznacz cały

AnsiString *tekst = new AnsiString;

Pytanie więc jaką maksymalną pojemność ma zmienna jeżeli zastosujemy coś takiego:

Kod: Zaznacz cały

AnsiString tekst;

[Witold]

Teoretycznie AnsiString może pomieścić dane o pojemności do 2 GB. Ale czy Windows na takie coś pozwala przydzielając pamięć dla programu. Myślę, że rzeczywistość może wyglądać trochę inaczej.

Najlepiej sprawdź. Jeżeli masz sporo RAMu i znajdzie się odpowiednio duży, ciągły blok pamięci to powinno się udać. U mnie max ~300MB przy 2GB RAMu.

Kod: Zaznacz cały

void __fastcall TForm1::Button1Click(TObject *Sender)
{
  const int _2GB = 2147483647; // 2147483648
  const int  _100MB = 104857600;

  const int ile_zarez = 10*_100MB;
 
  AnsiString as;
  as.SetLength(ile_zarez);
}


Zapewne dane o pojemność do 2 GB można zrealizować za pomocą instrukcji:

Kod: Zaznacz cały

AnsiString *tekst = new AnsiString;

Czemu tak sÄ…dzisz ?

[Cyfrowy Baron]

Zanim zaczniesz dalej brnąc w AnsiString, najpierw sprawdź kilka rzeczy:

Po pierwsze czy możesz tą stronę wczytać do właściwości Text obiektu Memo, tak jak to pokazałem w serwisie.
Po drugie jeżeli działa wczytywanie do Memo to spróbuj wczytać tą stronę do obiektu typu TStringList tak jak to pokazałem wyżej.
Po trzecie sprawdź wczytywanie tej strony do zmiennej AnsiString nie za pomocą komponentu INDY, lecz za pomocą przedstawionej przeze mnie funkcji AnsiString ReadFileURL(AnsiString Url).

Gdy już będziesz znał odpowiedzi na te pytania, będzie można szukać dalej przyczyny.
Podaj adres strony której nie możesz wczytać, a sprawdzę to, gdyż u mnie wczytywanie stron do zmiennej AnsiString dotychczas zawsze działało, ale być może nie natknąłem się jeszcze na taką stronę.

[Miroo_007]

Sprawdziłem. Twój kod działa poprawnie. Cała strona http została wczytana. Ale dlaczego nie została wczytana do AnsiString?

Kod: Zaznacz cały

TStringList *lista = new TStringList;
lista->Text = IdHTTP1->Get("http:\\...");

[Cyfrowy Baron]

Prawdopodobnie problem z pojemnością, lub jakieś ograniczenie funkcji INDY, dlatego chciałem żebyś wypróbował funkcję AnsiString ReadFileURL(AnsiString Url).

[Witold]

Ale dlaczego nie została wczytana do AnsiString?

Najwyraźniej została wczytana cała. TidHTTP.Get zwraca AnsiString.

AnsiString __fastcall TidHTTP.Get(AnsiString AURL)


Również właściwość TStringList.Text pobiera/zwraca AnsiString.

Nie napisałeś jak sprawdzałeś jakie dane znajdują się w AnsiStringu. W czym próbowałeś wyświetlić ten string.

[Cyfrowy Baron]

No właśnie, to wszystko jest jakieś mocno nie jasne. Właściwość Text obiektu TStringList jest typu AnsiString, więc powinno działać tak samo w odniesieniu do zmiennej typu AnsiString, co łatwo sprawdzić:

Kod: Zaznacz cały

TStringList *lista = new TStringList;
lista->Text = IdHTTP1->Get("http:\\...");

AnsiString tekst = lista->Text;

Memo1->Text = tekst;


Jeżeli tak działa, to musi działać również tak:

Kod: Zaznacz cały

AnsiString tekst = IdHTTP1->Get("http:\\...");

Memo1->Text = tekst;


[Darek_C++]

Tak na marginesie adres strony nie podaje się jak w tym poście:
IdHTTP1->Get("http:\\...");
ale
IdHTTP1->Get("http://...");

[Miroo_007]

Zmienna AnsiString sprawdzałem za pomocą Debuggera wykorzystując opcję Evaluate/Modify. Wyszukiwałem konkretnych danych w zmiennej AnsiString lecz nie znajdywał mi ich, dlatego że nie została wczytana cała strona http.
Co do uwagi Darka_c++ dotyczÄ…cÄ…:
IdHTTP1->Get("http:\\...");
Ten wpis został wykonany "na szybko" i nie jest odzwierciedleniem mojego kodu tylko przykładem.