SASGIS - SAS.Планета |
| View Issue Details |
|
| ID | Project | Category | View Status | Date Submitted | Last Update |
| 0002568 | SAS.Планета | [All Projects] Хотелка | public | 29-11-2014 07:35 | 10-12-2014 10:41 |
|
| Reporter | t000x | |
| Assigned To | | |
| Priority | normal | Severity | minor | Reproducibility | have not tried |
| Status | confirmed | Resolution | open | |
| Platform | | OS | | OS Version | |
| Product Version | 140505 | |
| Target Version | 40xxxx | Fixed in Version | | |
|
| Summary | 0002568: При загрузке выделенной области делать паузу t секунд после скачивания x мегабайт |
| Description | Тут обнаружил такую штуку, которую трижды перепроверил, если скачать около ~ 150 mb со спутника google, то гугл банит IP, если сделать паузу после ~ 100mb где-то на 5-10 мин, то можно ещё столько же скачать и так далее.
Так что хотелось бы иметь возможность ставить паузу после определенного кол-ва скачанного трафика. |
| Steps To Reproduce | |
| Additional Information | |
| Tags | No tags attached. |
| Relationships | |
| Attached Files | |
|
| Issue History |
| Date Modified | Username | Field | Change |
| 29-11-2014 07:35 | t000x | New Issue | |
| 29-11-2014 08:58 | t000x | Note Added: 0015016 | |
| 29-11-2014 08:58 | t000x | Note Edited: 0015016 | bug_revision_view_page.php?rev_id=6339 |
| 29-11-2014 08:59 | t000x | Note Edited: 0015016 | bug_revision_view_page.php?rev_id=6340 |
| 29-11-2014 09:00 | t000x | Note Edited: 0015016 | bug_revision_view_page.php?rev_id=6341 |
| 29-11-2014 09:24 | zed | Description Updated | bug_revision_view_page.php?rev_id=6343#r6343 |
| 29-11-2014 10:57 | t000x | Note Deleted: 0015016 | |
| 29-11-2014 11:28 | t000x | Note Added: 0015017 | |
| 29-11-2014 11:29 | t000x | Note Edited: 0015017 | bug_revision_view_page.php?bugnote_id=15017#r6345 |
| 29-11-2014 20:16 | Papazol | Note Added: 0015021 | |
| 30-11-2014 11:08 | t000x | Note Added: 0015023 | |
| 30-11-2014 11:26 | zed | Note Added: 0015024 | |
| 30-11-2014 11:39 | zed | Note Edited: 0015024 | bug_revision_view_page.php?bugnote_id=15024#r6347 |
| 30-11-2014 17:17 | Papazol | Note Edited: 0015021 | bug_revision_view_page.php?bugnote_id=15021#r6349 |
| 02-12-2014 10:10 | t000x | Note Added: 0015025 | |
| 02-12-2014 11:56 | t000x | Note Edited: 0015025 | bug_revision_view_page.php?bugnote_id=15025#r6351 |
| 02-12-2014 12:55 | zed | Note Added: 0015027 | |
| 02-12-2014 16:49 | t000x | Note Added: 0015028 | |
| 02-12-2014 16:53 | zed | Note Added: 0015029 | |
| 10-12-2014 10:41 | vdemidov | Status | new => confirmed |
| 10-12-2014 10:41 | vdemidov | Product Version | => 140505 |
| 10-12-2014 10:41 | vdemidov | Target Version | => 40xxxx |
| 10-12-2014 10:41 | vdemidov | Summary | Повышение КПД скачивания с гугла с обходом блока по IP => При загрузке выделенной области делать паузу t секунд после скачивания x мегабайт |
|
Notes |
|
|
(0015017)
|
|
t000x
|
29-11-2014 11:28
(edited on: 29-11-2014 11:29) |
|
Забыл сказать что речь о скачивании на скорости 30 мегабит /
Пробовал в один поток и пробовал в два потока, результат один, при достижении примерно 150 мб общего трафика - бан. Гибрид не проверял.
|
|
|
|
(0015021)
|
|
Papazol
|
29-11-2014 20:16
(edited on: 30-11-2014 17:17) |
|
Иногда бан наступает и при другом количестве скачанного. Так что формальный перерыв может помочь не во всех случаях.
По моим наблюдениям самый действенный способ избежать бана - скачивать горизонтальными полосами, высотой не более 16 тайлов. Длина значения не имеет. Да, это требует постоянного присутствия за компом, но позволяет при наличии свободного времени выкачать всё, что нужно.
|
|
|
|
(0015023)
|
|
t000x
|
|
30-11-2014 11:08
|
|
Я говорю про конкретный случай, с выделенного IP.
Уже 4-вертый день качаю гугло карту пачками по 100 mb с перерывом по 10 мин, и всё путём. Единственное что напрягает так это ручная работа. |
|
|
|
(0015024)
|
|
zed
|
30-11-2014 11:26
(edited on: 30-11-2014 11:39) |
|
Вы по-моему в программировании разбираетесь? Чтобы избавиться от ручной работы можете добавить счётчик трафика и захардкодить sleep вот тут.
А по поводу реализации тикета - не знаю, стоит ли игра свеч. Это нужно будет только для гугла ди и к тому же не даёт гарантий, а может работать только в отдельных конкретных случаях.
|
|
|
|
(0015025)
|
|
t000x
|
02-12-2014 10:10
(edited on: 02-12-2014 11:56) |
|
Я бы написал, но пока разберусь в ваших сорсах, пока поставлю XE2 и настрою все компоненты, это ж ппц времени убью )
RE: "А по поводу реализации тикета - не знаю, стоит ли игра свеч. Это нужно будет только для гугла ди и к тому же не даёт гарантий, а может работать только в отдельных конкретных случаях."
Ну а почему бы и нет, ведь гугл основной карто-сервис, а фичу можно зарелизить хотябы на уровне настроек в ини файле, так сказать "undocumented feature" будет.
|
|
|
|
(0015027)
|
|
zed
|
|
02-12-2014 12:55
|
|
> Я бы написал, но
Если фича нужна, то всё делается без всяких НО. А этот тикет вообще могут закрыть или назначить на 2020 год.
> Ну а почему бы и нет, ведь гугл основной карто-сервис
Вот только в коде у нас полная абстакция и нет никаких привязок к картсервисам. |
|
|
|
(0015028)
|
|
t000x
|
|
02-12-2014 16:49
|
|
Тогда такой вопрос, у вас вроде раньше был слепок виртуальной машины с установленными Xe2 и компонентами.
Где это чудо можно скачать ? |
|
|
|
(0015029)
|
|
zed
|
|
02-12-2014 16:53
|
|
|