Лог обновление на текущий момент:
Content Downloader X1 версии 11.9999956 (22.05.2016)
- Доработки механизма вывода всплывающей информации границ парсинга при движении курсора мыши над элементами деревьев.
Content Downloader X1 версии 11.9999955 (21.05.2016)
- Теперь при запуске парсинга во вкладке "Контент" происходит проверка на наличие какого-либо текста в шаблонах повторяющихся границ парсинга (если текста нет, то туда автоматически вставляется оператор [VALUE]);
- Функция htm to txt получила индивидуальные настройки для ее применения к каждой обычной границе парсинга;
- Повторяющиеся границы парсинга теперь имеют свои собственные функции поиск-замены (ctrl+5);
- Теперь выводится полная информация о границах парсинга при наведении курсора на их элементы в дереве макросов и в дереве границ парсинга;
- Множество других доработок и исправлений.
Content Downloader X1 версии 11.9999950 (12.05.2016)
- Во встроенном планировщике программы (ctrl+p) появилась возможность назначать для каждого проекта индивидуальный вариант запуска ("запускать парсинг во вкладке" или "запускать сканер сайтов");
- В поле custom headers (в окне ctrl+h) добавлен макрос [ROTATION] (служит в качестве разделителя наборов HTTP-заголовков для их автоматической смены при парсинге);
- Макрос [WRITEITATFIRSTDOC] теперь работает корректно, если парсить с дозаписью в файлы с разными именами (также опция "парсить в 1 файл" для этого должна быть включена);
- Множество других доработок.
Content Downloader X1 версии 11.9999949 (03.05.2016)
- Добавлена возможность задания имен для повторяющихся границ парсинга;
- Несколько других доработок.
Content Downloader X1 версии 11.9999942 (01.05.2016)
Обновление по просьбе клиента
- Библиотека Clever Internet Suite (включается в окне ctrl+h) теперь корректно работает с произвольными HTTP-заголовками (custom headers в окне ctrl+h).
Content Downloader X1 версии 11.9999938 (29.04.2016)
- Расширены возможности макросов [COUNTUP1] и [COUNTUP2];
- Для типов лицензии ULTIMATE в сканере сайтов (ctrl+7) сняты ограничения по максимальному количеству потоков;
- В сканере сайтов (ctrl+7) Устранены зависания при копировании ссылок через ctrl+c.
Content Downloader X1 версии 11.9999937 (27.04.2016)
Обновление по просьбам клиентов
- Для макросов шаблона вывода [COUNTUP1] и [COUNTUP2] добавлен новый параметр [REPLACEENTRIES];
- Для файла с загруженными ранее ссылками (в окне ctrl+t) добавлена опция "только чтение".
Content Downloader X1 версии 11.9999935 (25.04.2016)
Обновление по просьбам клиента
- Макросы шаблона вывода [COUNTUP1] и [COUNTUP2] теперь могут подсчитывать количество вхождений указанной подстроки в тексте;
- Добавлен макрос шаблона вывода [WRITEITATFIRSTDOC] (его содержимое будет записано в результат парсинга только при сохранении первого документа).
Content Downloader X1 версии 11.9999934 (24.04.2016)
Обновление по просьбе клиента
- Добавлен макрос шаблона вывода [RUN], позволяющий запускать приложения Windows с передачей параметров.
Content Downloader X1 версии 11.9999933 (23.04.2016)
- Реализован вывод вспомогательных элементов для макроса [FINAL_REPLACE] (появление кнопок EDIT, подсветка макроса и прочее);
- В анализаторе базовых макросов (f9) реализован вывод кнопок EDIT для макросов GETMORECONTENT;
- В анализаторе базовых макросов (f9) реализован вывод кнопок EDIT для макросов WBAPP;
- Добавлены макросы шаблона вывода [COUNTUP1] и [COUNTUP2] (они служат для подсчета количества перечисленных через определенный разделитель элементов текста);
- Множество других доработок.
Content Downloader X1 версии 11.9999928 (05.04.2016)
- Множество доработок по просьбам клиентов.
Content Downloader X1 версии 11.9999927 (01.03.2016)
- Несколько доработок.
Content Downloader X1 версии 11.9999923 (16.02.2016)
- Несколько доработок.
Content Downloader X1 версии 11.9999922 (12.02.2016)
HotFix!
- Устранены проблемы при вычислением границ парсинга с оператором {br} внутри.
Content Downloader X1 версии 11.9999920 (12.02.2016)
- Устранены зависания при парсинге во вкладке контент;
- Несколько других доработок.
Content Downloader X1 версии 11.9999918 (04.02.2016)
- Добавлен макрос шаблона вывода [FILE] (вставка строк из файла на диске);
- Добавлен макрос шаблона вывода [GETVALUE] (служит для получения максимального, минимального, случайного или среднего значения из ряда чисел);
- Несколько других доработок.
Content Downloader X1 версии 11.9999917 (30.01.2016)
- Для многоуровневой вложенности повторяющихся границ парсинга, заданных в повторяющихся добавлена возможность выводить значения обычных границ парсинга, заданных в "самой корневой" повторяющейся ([RPARENTGRAN...], http://sbfactory.ru/cd/?p=2020).
Content Downloader X1 версии 11.9999915 (30.01.2016)
- Исправлена ошибка, связанная с зависанием работы сканера сайтов при копировании ссылок в буфер;
- Несколько других доработок и нововведений.
Content Downloader X1 версии 11.9999914 (26.01.2016)
- Несколько доработок.
Content Downloader X1 версии 11.9999912 (25.01.2016)
- Исправлена ошибка в работе макроса [EXTRACTPHONES];
- Доработан алгоритм действия функции поиска по дереву макросов шаблона вывода (ctrl+f);
- Несколько других доработок.
Content Downloader X1 версии 11.9999911 (21.01.2016)
Обновление по просьбе клиента
- Исправлена работа макроса шаблона вывода [GETURLSBYANCHORS] с параметром [NODUP] (теперь дубли ссылок в результат не попадают).
Content Downloader X1 версии 11.9999910 (19.01.2016)
- Для макроса шаблона вывода [WBAPP] добавлена опция, позволяющая вызывать его только в одном из активных (обрабатываемых текущий момент времени) документов при парсинге во многопоточном режиме (меню - настройка - настройка макросов -> WBAPP).
Content Downloader X1 версии 11.9999909 (19.01.2016)
- Устранены зависания WBApp.
Content Downloader X1 версии 11.9999908 (18.01.2016)
- Добавлен макрос шаблона вывода [SKU_UNIQUE] (генерация уникального ID (SKU) с привязкой к имени товара/статьи);
- Несколько других доработок.
Content Downloader X1 версии 11.9999907 (15.01.2016)
- Добавлен макрос шаблона вывода [GETURLSBYANCHORS];
- Несколько других доработок.
Content Downloader X1 версии 11.9999905 (12.01.2016)
- Hotfix!
Content Downloader X1 версии 11.9999901 (12.01.2016)
- Несколькдо доработок и улучшений.
WBApp v 2.00
- Добавлено событие для имитации нажатия кнопок клавиатуры ([KEYPRESS]);
- Добавлена возможность установки фокуса на нужные элементы WEB-страниц (новая вариация события клика);
- Несколько других доработок.
Content Downloader X1 версии 11.99999 (09.01.2016)
- Доработана функция поиск-замены.
Content Downloader X1 версии 11.99998 (02.01.2016)
- Добавлен новый макрос шаблона вывода [GENERATE] (генерация строк по шаблону с использованием нарастающей числовой переменной);
- Для макроса шаблона вывода [DYNAMICVALUES] добавлена новая опция "включить регистрозависимость для имен характеристик" (shift+ctrl+d);
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.99997 (31.12.2015)
С НОВЫМ 2016 ГОДОМ, ДОРОГИЕ ДРУЗЬЯ! МЫ ИСКРЕННЕ ЖЕЛАЕМ ВАМ СЧАСТЬЯ, ЗДОРОВЬЯ, ЛЮБВИ, ПРОЦВЕТАНИЯ, БЛАГОПОЛУЧИЯ И ВСЯЧЕСКИХ БЛАГ!
- Макрос шаблона вывода [CHECKENTRY] теперь выполняется после макроса PHP_SCRIPT_0 (чуть позже по отношению к другим макросам);
- Макрос шаблона вывода [EXTRACTEMAILS] теперь добавляет em-ail адреса с доменов третьего уровня (ранее - только с доменов второго уровня);
- В инструменте слияния двух CSV-файлов (в редакторе CSV-файлов) теперь можно указывать, с какой строки добавляемого файла производить слияние;
- При задании повторяющихся границ парсинга внутри повторяющихся теперь корректно работает вложенное выполнение [PARENTGRAN];
- Множество других доработок и исправлений.
Content Downloader X1 версии 11.99995 (01.12.2015)
Обновление по просьбам клиентов
- В инструмент массовой загрузки файлов добавлена кнопка для копирования адресов незагруженных файлов в буфер;
- Устранена проблема с парсингом файлов с локального диска во вкладках контент и ссылки с использованием [PARAM] в путях файлов;
- Несколько других доработок.
Content Downloader X1 версии 11.99993 (30.11.2015)
- Доработан алгоритм определения имен файлов и их расширений для макроса шаблона вывода DOWNLOADFILE.
Content Downloader X1 версии 11.99992 (29.11.2015)
- Макрос шаблона вывода [ADDURL] теперь не добавляет одну и ту же ссылку дважды (не зацикливает парсинг);
- В панель инструментов редактора шаблона вывода добавлена кнопка настройки макросов;
- Макрос шаблона вывода DOWNLOADFILE теперь может скачивать файлы по FTP;
- Несколько других доработок.
Content Downloader X1 версии 11.99991 (25.11.2015)
- Выполнены работы по улучшению стабильности парсинга во вкладке "контент" и сбора ссылок в сканере сайтов;
- В дополнительные параметры загрузки изображений (ctrl+9) добавлен checkbox "не загружать картинки с других сайтов";
- Множество других доработок и исправлений.
Content Downloader X1 версии 11.99990 (22.11.2015)
- Добавлены новые параметры в окно настройки макросов [INT_ID] и [INT_ID2] (меню - настройка - настройка макросов);
- Добавлены макросы шаблона вывода [RESET_INT_ID] и [RESET_INT_ID2] для сброса значений макросов [INT_ID] и [INT_ID2] (соответственно);
- При применении фильтров ссылок к списку очереди сканера сайтов теперь "история пройденных ссылок" не очищается;
- При редактировании списка очереди сканера сайтов теперь "история пройденных ссылок" не очищается;
- Множество других доработок.
Content Downloader X1 версии 11.99989 (18.11.2015)
- Множество доработок.
Content Downloader X1 версии 11.99988 (16.11.2015)
- Добавлен макрос шаблона вывода [ADDURL] (пополнение списка ссылок указанными URL-адресами при парсинге во вкладке "контент");
- Теперь поддерживается вложенное выполнение макроса TOPRICE (один макрос TOPRICE может быть вложен внутрь другого, сначала высчитывается вложенный);
- Несколько других доработок.
Content Downloader X1 версии 11.99987 (14.11.2015)
- Множество доработок.
Content Downloader X1 версии 11.99985 (12.11.2015)
- Библиотека Internet Explorer (DOM)/WBApp теперь корректно работает с данными в кодировке UTF-8;
- Несколько других доработок.
Content Downloader X1 версии 11.99983 (10.11.2015)
- Макрос шаблона вывода DOWNLOADFILE теперь не сохраняет недокачанные файлы;
- Теперь для макроса шаблона вывода DOWNLOADFILE можно указывать количество попыток загрузки файлов (меню - настройка - настройка макросов - DOWNLOADFILE);
- При использовании макроса [DFN] (без {ext}) программа теперь корректно определяет расширение файла;
- В инструменте парсинга большого количества документов (от 1 000 000) появилась возможность указывать, с какого места начинать подгрузку ссылок из файла (сколько ссылок пропустить);
- Добавлен макрос шаблона вывода [WAITFORME] (ожидание действий пользователя, например, ручной ввод каптчи).
- Несколько других доработок.
Content Downloader X1 версии 11.99982 (14.10.2015)
Обновление по просьбе клиента
- Для макроса шаблона вывода [SYN] (синонимизация контента) добавлен новый параметр [AVOIDTAGS] (не синонимизировать текст внутри HTML-тегов).
WBApp v 1.9907
- Устранены некоторые проблемы подвисаний при работе с WBApp.
Content Downloader X1 версии 11.99981 (09.10.2015)
- Теперь [USEDKEY] (оператор макроса [CHECKENTRY]) "не теряет" регистр;
- Теперь макрос случайного вывода текста по умолчанию отключен (включить его можно в: главное меню -> "настройка" -> "настройка макросов" -> "{..|..|..|..} (макрос случайного вывода текста)");
- Множество других исправлений доработок.
Content Downloader X1 версии 11.9998 (06.10.2015)
- Появилась возможность передавать POST-Data для макроса GETMORECONTENT (http://sbfactory.ru/cd/?p=348);
- Множество других доработок.
Content Downloader X1 версии 11.9997 (23.09.2015)
Обновление по просьбе клиента
- Для макроса [CHECKENTRY] добавлен оператор [USEDKEY] (http://sbfactory.ru/cd/?p=261);
- Несколько других доработок.
Content Downloader X1 версии 11.9995 (20.09.2015)
- Добавлена возможность использовать POST-запросы для парсинга во вкладках: "контент" и "ссылки" (ctrl+h для настройки);
- Макрос шаблона вывода GETMORECONTENT с [WBAPPMODE] теперь может использовать прокси (из списка ctrl+r);
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.9993 (30.08.2015)
Обновление по просьбам клиентов
- В меню - файл добавлен новый пункт "сохранить проект как (shift+ctrl+s);
- В редакторе CSV-файлов у функции добавления заданного текста в ячейки доступна новая опция "добавлять только в пустые ячейки";
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.9992 (16.08.2015)
Обновление по просьбам клиентов
- Исправлены функции поиска повторяющихся границ парсинга (ранее были проблемы с поиском последнего цикла в случае, если конец парсинга имеет длину в 1 символ и находится на последней позиции в коде);
- Исправлена работа макроса шаблона вывода [SAVETOFILE] (ранее были проблемы с параметром {head});
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.9991 (12.08.2015)
- Добавлен макрос шаблона вывода [RESPONSECODE] (выводит код ответа сервера);
- Для макроса шаблона вывода [SAVETOFILE] добавлен параметр {head} (задание строки заголовка для сохраняемого файла, подробнее смотрим тут http://sbfactory.ru/cd/?p=1984);
- Несколько других доработок.
Content Downloader X1 версии 11.9990 (24.07.2015)
Обновление по просьбам клиентов
- В сканер сайтов добавлена функция автоматического создания бекапа;
- В настройку макроса (меню - настройка - настройка макросов) добавлена опция паузы между загрузками файлов.
Content Downloader X1 версии 11.9989 (22.07.2015)
Обновление по просьбе клиента
- Исправлена ошибка, вызывающая зависания инструмента массовой загрузки файлов;
- В инструмент добавления ссылок через браузер (f6) введена функция добавления закешированного документа в список ссылок главного окна программы (для последующего парсинга);
- Несколько других доработок.
Content Downloader X1 версии 11.9988 (21.07.2015)
- В функции поиск-замены добавлены операторы: {reset_if_nil}, {break_if_not_nil} (подробнее смотрим тут http://sbfactory.ru/cd/?p=644);
- Добавлено диалоговое окно подтверждения закрытия программы в случае запущенного парсинга контента или ссылок;
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.9987 (07.07.2015)
- В WBApp launcher (ctrl+w) добавлен инструмент управления проектами.
Content Downloader X1 версии 11.9985 (04.07.2015)
Обновление по просьбе клиента
- В редактор CSV файлов добавлена функция объединения строк таблицы по ключевому столбцу с возможностью добавления данных в ячейки указанного столбца (в редакторе CSV файлов на панели инструментов кнопка "дополнительные функции обработки ячеек" -> вкладка "объединение строк").
Content Downloader X1 версии 11.9983 (03.07.2015)
HotFix!
- Исправлена проблема с выводом .
Content Downloader X1 версии 11.9982 (03.07.2015)
- Добавлена поддержка пропусков вхождений (старое определение - номер тега) для начала и конца парсинга повторяющихся границ (смотрите во вкладке задания границ парсинга, ctrl+1);
- Множество других доработок, несколько исправлений и изменений.
Content Downloader X1 версии 11.9980 (02.07.2015)
- Повторяющиеся границы парсинга теперь имеют индивидуальные разделители значений циклов (ctrl+5);
- Несколько других доработок.
Content Downloader X1 версии 11.9978 (30.06.2015)
Обновление по просьбе клиента
- В параметры [PREFIX]...[/PREFIX] макросов шаблона вывода [VERTTABLE] и [HORIZTABLE] добавлена опция [SINGLEUSE] (единоразовый вывод префикса);
- Несколько других доработок.
Content Downloader X1 версии 11.9977 (28.06.2015)
- Теперь менеджером макросов можно пользоваться из главного окна программы (ctrl+правый клик по редактору шаблона вывода);
- В дереве отображения опций (что находится в правой части вкладки "контент") теперь есть информация об используемой в проекте библиотеке запросов;
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.9975 (26.06.2015)
- WBApp теперь поддерживает прокси без авторизации.
Content Downloader X1 версии 11.9974 (24.06.2015)
- Добавлены функции рендеринга (создания изображений) элементов WEB-страниц с помощью WBApp (http://sbfactory.ru/cd/?p=2532);
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.9973 (23.06.2015)
- В списки выбора кодировок во вкладках "контент" и "ссылки" добавлен пункт CUSTOM (любая кодировка, настраивается вами в окне ctrl+8 -> вкладка "кодировки");
- Множество других доработок и исправлений.
Content Downloader X1 версии 11.9972 (21.06.2015)
- В инструмент генерации ссылок добавлена возможность быстрой смены шаблонов (смотрите контекстное меню текстового поля шаблона ссылки).
Content Downloader X1 версии 11.9958 (20.06.2015)
Обновление по просьбам клиентов
- Теперь запоминается положение центрального splitter во вкладке "контент";
- Добавлен макрос шаблона вывода [FIXREGISTER].
Content Downloader X1 версии 11.9957 (19.06.2015)
Обновление по просьбе клиента
- Теперь при парсинге с использованием библиотеки Internet Explorer (DOM) / WBApp содержимое папки WBAppData больше не накапливается.
Content Downloader X1 версии 11.9955 (18.06.2015)
- Файлы проектов WBApp для парсинга контента и ссылок (ctrl+w) теперь сохраняются в файлы проектов программы и загружаются из них;
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.9952 (17.06.2015)
- В сканере сайтов появилась возможность делать бекап в указанные на диске файлы;
- Устранена ошибка в WBApp, которая могла приводить к остановке таймера обратного отсчета;
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.9951 (16.06.2015)
- Кодировка сохраняемого документа теперь по умолчанию "UTF-8 без BOM" (вкладка "Контент" - группа "Сохранение результата");
- Добавлен макрос шаблона вывода [FIXLAYOUT] (http://sbfactory.ru/cd/?p=261);
- Множество других доработок и исправлений.
Content Downloader X1 версии 11.9950 (11.06.2015)
Обновление по просьбе клиента
- Большое количество доработок макроса шаблона вывода [GETMORECYCLECONTENT] (подробнее о макросе читаем тут http://sbfactory.ru/cd/?p=622).
Content Downloader X1 версии 11.9949 (09.06.2015)
Обновление по просьбе клиента
- Добавлен новый макрос шаблона вывода [HTMLDECODE] (расшифрует HTML-кодировку);
- Несколько других доработок.
Content Downloader X1 версии 11.9948 (07.06.2015)
- В настройках макроса шаблона вывода [DYNAMICVALUES] (shift+ctrl+d) появилась возможность использовать поиск-замену для значений характеристик;
- Множество других доработок.
Content Downloader X1 версии 11.9947 (04.06.2015)
- В программу добавлен новый инструмент: меню - сервис - парсинг большого количества WEB-документов во вкладке контент (от 1 миллиона) (ctrl+b).
Content Downloader X1 версии 11.9942 (03.06.2015)
Обновление по просьбе клиента
- В макрос шаблона вывода [SORT] добавлен параметр {invert} (сортировка в обратном порядке).
Content Downloader X1 версии 11.9940 (01.06.2015)
- Макрос шаблона вывода [SORT] теперь корректно сортирует строки с числами.
Content Downloader X1 версии 11.9939 (30.05.2015)
Обновление по просьбе клиента
- Добавлен макрос шаблона вывода [SORT] (сортировка строковых элементов в тексте).
Content Downloader X1 версии 11.9938 (26.05.2015)
Обновление по просьбе клиента
- Макрос шаблона вывода DOWNLOADFILE теперь имеет редактируемый список MIME-типов для автоопределения расширения загружаемых файлов (меню - настройка - настройка макросов - DOWNLOADFILE);
- Множество других доработок.
Content Downloader X1 версии 11.9937 (24.04.2015)
- Добавлена возможность использовать POST-Запросы в макросе шаблона вывода GETMORECONTENT (http://sbfactory.ru/cd/?p=348);
- Восстановлена работа хоткея очистки списка ссылок (F7);
- Несколько других доработок.
Content Downloader X1 версии 11.9935 (14.04.2015)
- В опции загрузки/сохранения файлов в редакторе CSV добавлена возможность разбития больших CSV на несколько штук меньшего размера;
- Инструмент массовой загрузки файлов теперь поддерживает: User Agent, TimeOut, Proxy, Cookies, Custom Headers (из ctrl+H и ctrl+r);
- Множество других доработок.
Content Downloader X1 версии 11.9934 (02.04.2015)
- Макрос шаблона вывода [DOCNAME] теперь не игнорирует символ & и символ точки с запятой;
- Границы парсинга с отредактированными (измененными) параметрами (ctrl+4, ctrl+5) теперь маркируются в дереве синим цветом;
- Добавлена возможность быстро загружать (делать предпросмотр) файлы проектов с помощью shift+click из диалогового окна открытия файла проекта (ctrl+o);
- Макрос шаблона вывода DOWNLOADFILE теперь загружает файлы, адреса которых указаны без http;
- Большое количество других доработок.
Content Downloader X1 версии 11.9933 (23.03.2015)
Обновление по просьбам клиентов
- Макросы шаблона вывода: [REGDOWN], [REGUPALL], [REGUPFIRST] теперь выполняются практически после всех других макросов;
- Макрос шаблона вывода DOWNLOADFILE теперь имеет опцию TimeOut (меню - настройка - настройка макросов - DOWNLOADFILE);
- Несколько других доработок.
Content Downloader X1 версии 11.9930 (20.03.2015)
Обновление по просьбе клиента
- В макрос шаблона вывода [DYNAMICVALUES] добавлен параметр [INVERSEMODE] (http://sbfactory.ru/cd/?p=2170).
Content Downloader X1 версии 11.9929 (19.03.2015)
Обновление по просьбе клиента
- В инструмент слияния двух CSV-файлов (в редакторе CSV) добавлена опция дозаписи данных в заполненные ячейки;
- Несколько других доработок.
Content Downloader X1 версии 11.9928 (15.03.2015)
Обновление по просьбе клиента
- Доработан оператор функций поиск-замены [ONERULE] (теперь он может применяться только к выбранным правилам (строкам) поиск-замены: [ONERULE]...[/ONERULE]).
Content Downloader X1 версии 11.9927 (27.02.2015)
Обновление по просьбам клиентов
- Несколько доработок.
Content Downloader X1 версии 11.9926 (26.02.2015)
Обновление по просьбам клиентов
- В заголовке окна предпросмотра результатов парсинга контента теперь фигурирует "активная" ссылка;
- В функции поиск-замены добавлен оператор [ONERULE] (вставляется в любое место и включает режим срабатывания только одного правила поиск-замены).
Content Downloader X1 версии 11.9925 (25.02.2015)
- Макрос шаблона вывода [STRINGSFILTER] теперь выполняется до макроса [REPLACE];
- Расширены возможности функций поиск-замены;
- Множество других доработок.
Content Downloader X1 версии 11.9922 (10.02.2015)
- Теперь макрос GETMORECONTENT может использовать WBApp для загрузки кода WEB-документа (подробнее читаем на этой странице http://sbfactory.ru/cd/?p=348);
- В инструмент генерации ссылок добавлена опция автоматического кодирования списка ключевиков в URL-кодировки (смотрите новую опцию в окне расширенной настройки генерации ссылок: кнопка {key});
- Множество других доработок.
Content Downloader X1 версии 11.9918 (03.02.2015)
- В опции макроса DOWNLOADFILE добавлен пункт "поддерживать редиректы";
- В дерево макросов шаблона вывода добавлен [WBAPP_F];
- Теперь исключается повторная вставка [GRAN..] в шаблон повторяющихся границ после задания обычных границ парсинга внутри повторяющейся;
- Макрос [DATAENCODE] (который является внутренним для ) теперь кодирует знак плюса в URL-кодировку;
- Несколько других доработок.
Content Downloader X1 версии 11.9917 (31.01.2015)
- Макрос шаблона вывода [GETREDIRECT] теперь корректно работает с редиректными ссылками движка DLE;
- Несколько других доработок.
Content Downloader X1 версии 11.9915 (25.01.2015)
- Макрос шаблона вывода теперь "может" оставлять оригинальные имена файлов при скачивании (меню - настройка - настройка макросов - DOWNLOADFILE: сделать пустым поле "шаблон имен файлов");
- Стартовое значение макросов [INT_ID] и [INT_ID2] теперь не увеличиваются во время выполнения предпросмотра парсинга контента (увеличиваются только при парсинге);
- Несколько других доработок.
Content Downloader X1 версии 11.9914 (16.01.2015)
- Несколько доработок.
Content Downloader X1 версии 11.9912 (14.01.2015)
- Макрос шаблона вывода [GETREDIRECT] теперь может работать не только с тегами гиперссылок (a), но и обрабатывать URL-адреса (по 1 в каждый макрос [GETREDIRECT]);
- Макрос шаблона вывода [CSVIMAGES] теперь имеет новый параметр для ограничения количества картинок (http://sbfactory.ru/cd/?p=261);
- Несколько других доработок.
Content Downloader X1 версии 11.9911 (07.01.2015)
- Значительное расширение возможностей функций поиск-замены;
- Добавлен макрос шаблона выыода [PROXY] (вставит в документ адрес прокси сервера, с которым он был загружен);
- Множество других доработок.
Content Downloader X1 версии 11.9908 (25.12.2014)
- Несколько доработок макроса шаблона вывода [DYNAMICVALUES];
- В макрос шаблона вывода [DYNAMICVALUES] добавлен оператор [GROUPNAME].
Content Downloader X1 версии 11.9907 (22.12.2014)
HOTFix!
- Устранена серьезная ошибка в работе функций поиск-замены.
Content Downloader X1 версии 11.9905 (22.12.2014)
- Добавлен макрос шаблона вывода [CACHE];
- Добавлен макрос шаблона вывода [WAIT];
- Множество других доработок.
WBApp v 1.88
- Добавлен макрос списка событий [SCROLLBYSCREENTHENRETURN] (прокрутить WEB-страницу на одну высоту окна браузера вниз и вернуться к началу списка событий);
- Добавлен макрос списка событий [MAXIMIZEWINDOW] (развернуть WBApp на весь экран при запуске);
- Несколько других доработок.
Content Downloader X1 версии 11.9901 (19.12.2014)
- Теперь можно делать shift+click по любой границе парсинга (из дерева границ парсинга в главном окне программы и в редакторе шаблона вывода) для вызова окна настроек соответствующей границы парсинга;
- При клике на любой из макросов поиск-замены (в анализаторе базовых макросов (f9)) теперь появляется графическая кнопка EDIT, которая служит для вызова окна редактирования выбранного макроса поиск-замены;
- При наведении курсором мыши на одну из границ парсинга (в дереве границ парсинга) справа появляется информация о внесенных изменениях в ее дополнительные настройки (ctrl+4);
- Множество других доработок.
Content Downloader X1 версии 11.99 (11.12.2014)
Обновление по просьбе клиента
- В функцию загрузки списка URL-адресов перед запуском парсинга контента (меню - "сервис" - "автоматизация") добавлена опция "применять фильтры ссылок";
- Несколько других доработок.
Content Downloader X1 версии 11.98 (10.12.2014)
Обновление по просьбе клиента
- В меню - "настрока" - "настрока макросов" -> "DOWNLOADFILE" добавлена опция "сбрасывать счетчик нумерации файлов".
Content Downloader X1 версии 11.97 (09.12.2014)
- В дополнительных параметрах загрузки изображений (кнопка "настройка парсинга картинок..." во вкладке "контент") теперь можно указывать custom headers;
- Множество других доработок.
Content Downloader X1 версии 11.95 (01.12.2014)
- Теперь можно указывать примечания к проектам (соответствующая кнопка на панели инструментов главного окна программы);
- В контекстные меню деревьев границ парсинга (во вкладке "контент" и в редакторе шаблона вывода) добавлены пункты настройки выбранных границ парсинга;
- При наведении курсора мыши на одну из повторяющихся границ теперь отображается шаблон повторяющейся границы пансинга;
- Теперь при задании повторяющихся границ парсинга можно устанавливать одну из 20 обычных границ парсинга в качестве контента для поиска циклов повторяющейся (смотрите новый выпадающий список в окне задания повторяющихся границ парсинга (ctrl+f1));
- Множество других доработок и исправлений.
WBApp v 1.83
- Добавлен макрос списка событий [CLEARCACHE] (очистка кеша и cookies).
Content Downloader X1 версии 11.89 (16.11.2014)
Обновление по просьбе клиента
- Несколько доработок.
WBApp v 1.80
- Добавлено событие [WAITFORME] (приостановит выполнение списка событий, пока не нажмете ctrl+w);
- Добавлен макрос списка событий [DOWNLOADIMAGES] (включает загрузку изображений при парсинге).
Content Downloader X1 версии 11.88 (15.11.2014)
Обновление по просьбе клиента
WBApp v 1.80
- Исправлена работа события клика по последнему элементу в DOM-дереве.
Content Downloader X1 версии 11.87 (14.11.2014)
Обновление по просьбам клиентов
- Добавлена опция "passive mode" для функций загрузок файлов на FTP (главное меню - настройка - опции программы -> вкладка "FTP").
WBApp v 1.79
- В макрос [CAPCHA] добавлен параметр NUMERIC (http://sbfactory.ru/cd/?p=1515).
Content Downloader X1 версии 11.85 (12.11.2014)
HOTFix!
- Исправлена работа кнопки переключения на панель с границами парсинга.
Content Downloader X1 версии 11.83 (12.11.2014)
- Теперь для массового изменения ширины столбцов таблицы (в редакторе шаблона вывода и в редакторе CSV файлов) можно использовать ctrl+(колесико мыши вверх или вниз);
- Множество других доработок.
Content Downloader X1 версии 11.82 (07.11.2014)
Обновление по просьбе клиента
- В планировщике (ctrl+p) теперь есть функция автоматической загрузки списка проектов из указанной директории (при запуске работы планировщика);
- Несколько других доработок.
Content Downloader X1 версии 11.81 (07.11.2014)
- Добавлена поддержка регулярных выражений в функциях фильтрации документов по списку ключевиков (shift+ctrl+f);
- В логе выполнения функций (при предпросмотре результатов парсинга контента) теперь отображаются данные о сохранении текста в файлы макросом шаблона вывода [SAVETOFILE];
- В макрос шаблона вывода [SAVETOFILE] добавлен параметр {path}абсолютный путь к корневой папке для сохранения файла{/path} (http://sbfactory.ru/cd/?p=1984);
- Теперь есть функция добавления имени выбранной в дереве границы парсинга в строку заголовка (смотрите контекстное меню дерева границ парсинга);
- Теперь столбцы таблицы в редакторе шаблона вывода нумеруются;
- Множество других доработок.
Content Downloader X1 версии 11.80 (01.11.2014)
Обновление по просьбе клиента
- Добавлен макрос шаблона вывода [STOP_IF_BANNED] (приостановить парсинг в случае бана);
- Несколько других доработок.
Content Downloader X1 версии 11.79 (29.10.2014)
WBApp v 1.78
- Исправлена ошибка с несрабатывающим выполнением предпросмотра события (двойной клик по событию) после нажатия паузы выполнения списка событий;
- Теперь события клика и вставки текста после их выполнения маркируются зеленым или красным цветом (в зависимости от того, был ли найден элемент WEB-страницы);
- Исправлена ошибка с ctrl+o, ctrl+s, ctrl+n при условии фокуса в браузере;
- Множество других доработок.
Content Downloader X1 версии 11.78 (27.10.2014)
Обновление по просьбам клиентов
- Теперь можно прописывать custom headers для макроса шаблона вывода (меню - настройка - настройка макросов - DOWNLOADFILE);
- В функции распознавания капчи добавлена опция "состоит только из цифр" (меню - настройка - опции программы - вкладка "антикапча");
- Несколько других доработок.
Content Downloader X1 версии 11.77 (26.10.2014)
Обновление по потребности клиента
- В редакторе CSV-файлов доработана функция обработки ячеек php-скриптом;
- Несколько других доработок.
Content Downloader X1 версии 11.75 (23.10.2014)
Обновление по просьбе клиента
- В лог парсинга (ctrl+l) ссылки попадают теперь вместе со значениями [PARAM].
Content Downloader X1 версии 11.74 (23.10.2014)
Обновление по просьбе клиента
- При предпросмотре результатов парсинга теперь не выполняются указанные скрипты и приложения из настроек автоматизации.
Content Downloader X1 версии 11.73 (22.10.2014)
Обновление по просьбе клиента
- В макрос шаблона вывода [CEHCKENTRY] добавлен параметр [WORD] (поиск слов целиком http://sbfactory.ru/cd/?p=261).
Content Downloader X1 версии 11.72 (21.10.2014)
- Множество важных доработок;
- Добавлена функция автоматической очистки папки для парсинга (вкладка "контент" - группа "сохранение результата").
Content Downloader X1 версии 11.70 (19.10.2014)
Обновление по просьбе клиента
- Реализовано автоматическое обновление анализатора макросов (f9) при изменении кода шаблона вывода;
- Реализовано автоматическое выделение элемента списка анализатора макросов (f9) при клике на соответствующий макрос шаблона вывода;
- Множество других доработок и исправлений.
Content Downloader X1 версии 11.65 (17.10.2014)
- В сканер сайтов (ctrl+7) добавлен инструмент для парсинга списка стартовых URL (Start URL Changer);
- Анализатор макросов шаблона вывода (f9) теперь может показывать [CSVCS] и [CSVLB] (для их отображения кликните по выпадающему меню кнопки обновления списка макросов в анализаторе макросов);
- При включении параметра инверсии теперь не происходит автоскроллинга окна с кодом WEB-документа;
- В инструменте задания границ парсинга (ctrl+f1) теперь корректно работают функции показа начала (ctrl+f1) и показа конца (ctrl+f2) парсинга при включенном параметре инверсия (ctrl+i);
- Множество других доработок и исправлений.
Content Downloader X1 версии 11.60 (16.10.2014)
- Добавлен макрос шаблона вывода [DUPIGNORE] (удаляет дубли данных);
- Устранена ошибка получения данных анализатором используемых макросов при его открытии (f9);
- Несколько других ВАЖНЫХ доработок.
Content Downloader X1 версии 11.59 (15.10.2014)
- Макрос шаблона вывода DOWNLOADFILE теперь учитывает HTML-тег base;
- Разделитель имен характеристик и их значений макроса [DYNAMICVALUES] теперь можно указывать в шаблоне любой повторяющейся границы парсинга (ctrl+5 или shift+ctrl+5), как {VALUE}: (если там указать незаэкранированную вариацию этого разделителя - [VALUE]:, то программа сочтет ее за оператор вывода значения цикла повторяющейся границы);
- Исправлена работа макроса [DYNAMICVALUES];
- Несколько других доработок.
Content Downloader X1 версии 11.58 (12.10.2014)
Обновление по желанию клиента
- В макрос шаблона вывода [SAVETOFILE] добавлен параметр {norewrite} (не перезаписывать файлы с одинаковыми именами);
- В макрос шаблона вывода [DOCNAME] добавлен параметр [UNIQUE] (подробнее смотрим тут http://sbfactory.ru/cd/?p=261)
- Несколько других доработок.
Content Downloader X1 версии 11.57 (11.10.2014)
- Сворачивание программы в трей теперь идет как опция (меню - настройка - опции программы).
Content Downloader X1 версии 11.55 (10.10.2014)
- Добавлен инструмент для скрытия/показа невыделенной части кода шаблона вывода (alt+h);
- Анализатор макросов (f9) теперь поддерживает еще больше макросов;
- Кнопка вызова анализатора макросов в редакторе шаблона вывода (ctrl+2) теперь расположена в левой части панели инструментов;
- В анализаторе макросов шаблона вывода теперь отображаются порядковые номера для макросов PHP_SCRIPT и для макросов GETMORECONTENT;
- В функцию автозагрузки списка прокси серверов (ctrl+r) добавлена опция "добавлять в список прокси без проверки";
- В лог парсинга (ctrl+l) теперь попадают и события автозагрузок списков proxy;
- Множество других доработок.
Content Downloader X1 версии 11.50 (08.10.2014):
- Использование анализатора макросов стало удобнее: добавлен хоткей - f9 и произведены некоторые доработки;
- Несколько других доработок и исправлений.
Content Downloader X1 версии 11.49 (07.10.2014):
- Несколько доработок.
Content Downloader X1 версии 11.42 (07.10.2014):
- Добавлен инструмент для анализа используемых базовых макросов шаблона вывода (кнопка "анализатор базовых макросов" во вкладке "контент" правее дерева границ парсинга);
- Макрос шаблона вывода [JSONDECODE] теперь выполняется значительно раньше (сразу после макроса );
- Множество других доработок и исправлений.
Content Downloader X1 версии 11.41 (05.10.2014):
HotFix!
- Устранены ошибки типа "access violation...", появившиеся при обновлении 11.40 (05.10.2014).
Content Downloader X1 версии 11.40 (05.10.2014):
- Добавлена новая опция к макросу шаблона вывода для исключения повторной загрузки одних и тех же файлов (меню - настройка - настройка макросов - DOWNLOADFILE -> пытаться исключать повторную загрузку одних и тех же файлов);
- Несколько других доработок.
Content Downloader X1 версии 11.39 (04.10.2014):
- Добавлена функция загрузки документов на FTP-сервер при завершении процедуры парсинга контента (вкладка "контент" - кнопка "автоматизация выполнения некоторых функций и прочее");
- Несколько доработок.
Content Downloader X1 версии 11.38 (01.10.2014):
Отмена одного из изменений предыдущего обновления (11.35):
- Функция запуска PHP-скриптов перед парсингом контента теперь выполняется до функции "загрузка url-адресов из файла перед запуском парсинга контента и ссылок" (меню - сервис - автоматизация), что позволяет вызвать скрипт, который создаст на диске файл со ссылками, затем созданный файл будет загружен функцией автоматизации в список ссылок программы и начать парсинг контента;
Приносим свои извинения за возможные неудобства.
Content Downloader X1 версии 11.35 (01.10.2014):
Обновление по просьбе клиента
- Функция запуска PHP-скриптов перед парсингом контента (вкладка "контент" - кнопка "автоматизация выполнения некоторых функций и прочее") теперь имеет функцию ожидания заданного времени, по прошествии которого будет запущен парсинг контента;
- Функция запуска PHP-скриптов перед парсингом контента теперь выполняется до функции "загрузка url-адресов из файла перед запуском парсинга контента и ссылок" (меню - сервис - автоматизация), что позволяет вызвать скрипт, который создаст на диске файл со ссылками, затем созданный файл будет загружен функцией автоматизации в список ссылок программы и начать парсинг контента;
- Функция "записывать ссылки не сохраненных элементов в файл" (в окне отчета, ctrl+l) теперь запишет ссылки с любой ошибкой (ранее в файл записывались ссылки только с ошибкой загрузки WEB-документа);
- Несколько других доработок.
Content Downloader X1 версии 11.33 (30.09.2014):
- Устранена причина возможных зависаний программы при длительном парсинге;
- Добавлена функция автоматической загрузки списка прокси из файла с локального диска или с HTTP-адреса при запуске парсинга (включается в ctrl+r);
- Теперь в окне предпросмотра результатов парсинга контента отображаются миниатюры картинок, загруженных макросом ;
- Теперь корректно выполняется приостановка процедуры парсинга контента с активной опцией повторной загрузки документов;
- При приостановке процедуры предпросмотра парсинга контента теперь происходит отмена загрузки файлов макросом (ранее файлы продолжались скачиваться);
- Память, занятая данными макроса [DYNAMICVALUES], теперь очищается при повторном запуске процедуры парсинга контента (ранее не очищалась);
- Большое, скорее, очень большое количество других доработок;
Content Downloader X1 версии 11.19 (21.09.2014):
Обновление по просьбе клиента
- Макрос шаблона вывода [JSONDECODE] теперь выполняется перед макросом [REPLACE];
- Макрос шаблона вывода [JSONENCODE] теперь выполняется до макроса .
Content Downloader X1 версии 11.18 (21.09.2014):
Обновление по просьбе клиента
- Добавлен макрос шаблона вывода [JSONDECODE]текст[/JSONDECODE] (расшифрует текст из JSON-кодировки (\u0421\u0438\u043d\u0438\u0439 -> Cиний)).
Content Downloader X1 версии 11.17 (21.09.2014):
- Теперь при задании конца повторяющихся границ парсинга появляется панель со значениями всех циклов этой границы (также справа вверху окна задания границ парсинга есть кнопка для принудительного вызова этой панели);
- В инструменте задания границ парсинга (ctrl+f1) теперь по умолчанию включена опция выполнения скриптов браузером;
- Опция выполнения скриптов браузером (в окне задания границ парсинга) теперь сохраняется при закрытии программы;
- Пустые циклы в повторяющихся границах парсинга теперь не учитываются;
- Множество доработок и изменений.
Content Downloader X1 версии 11.14 (17.09.2014):
Обновление по просьбе клиента
- В "файл с загруженными ранее ссылками" теперь попадают все WEB-адреса документов, кроме только тех, которые не загрузились;
- Теперь отображаются коды ошибок GET-запросов в инструменте задания границ парсинга;
- Теперь отображаются коды ошибок GET-запросов для макросов шаблона вывода GETMORECONTENT;
- В окне настроек повторяющихся границ парсинга (ctrl+5) теперь работают хоткеи для вставки [CSVCS] и [CSVLB] - F3 и F4;
- Несколько других доработок.
Content Downloader X1 версии 11.12 (09.09.2014):
Обновление по просьбе клиента
- Макрос DOWNLOADFILE теперь имеет три попытки на загрузку каждого файла (в случае ошибок "timed out").
Content Downloader X1 версии 11.11 (20.08.2014):
- При предпросмотре результатов парсинга во вкладке "контент" и "ссылки" теперь, в случае неудачной попытки загрузки WEB-документа, выводится текст ошибки обращения к сайту;
- Устранен "эффект дублирования" Custom Headers в HTTP-запросах программы (Custom Headers задаются в ctrl+h);
- Теперь можно отдельно указывать HTTP-заголовки для макросов PHP_SCRIPT (http://sbfactory.ru/cd/?p=186);
- Множество доработок.
Content Downloader X1 версии 11.10 (18.08.2014):
- Макрос шаблона вывода [TOTRANSLITE] теперь конвертирует пробелы не в "_", а в "-";
- Макрос шаблона вывода теперь понимает закодированные в URL-кодировку ссылки;
- Теперь, при неудачной загрузке файла макросом , в логе отображается ошибка загрузки (вкладка DOWNLOADFILE в нижней части окна предпросмотра парсинга контента);
- Панель поиска по коду (в инструменте задания границ парсинга) теперь отображает номер активного найденного вхождения;
- Большое количество других доработок.
Content Downloader X1 версии 11.08 (16.08.2014):
- Для инструмента задания границ парсинга (ctrl+f1) разработаны функции "супер - (поиска далее) - ctrl+f" по коду WEB-документа;
- Макросы шаблона вывода PHP_SCRIPT теперь работают с рф-доменами;
- Теперь, если есть ошибка в запросе PHP_SCRIPT, ее код выводится в соответствующий лог в окне предпросмотра результатов парсинга контента;
- Множество доработок.
Content Downloader X1 версии 11.07 (10.08.2014):
- Добавлены макросы шаблона вывода для парсинга HTML-таблиц: [HORIZTABLE], [VERTTABLE];
- Теперь нумеруется верхняя строка таблицы окна предпросмотра результатов парсинга контента; <<< кое-кто дождался =)
- К макросам шаблона вывода [INT_ID] и [INT_ID2] добавлены опции, позволяющие увеличивать значение при каждом вызове макроса [INT_ID] или [INT_ID2] в пределах одного документа (меню - настройка - опции макросов);
- Множество доработок.
Content Downloader X1 версии 11.02 (05.08.2014):
Обновление по просьбе клиента
- Теперь можно настроить максимальное количество срабатываний макроса шаблона вывода [RELOADDOCUMENT] при парсинге каждого WEB-документа (меню - настройка - настройка макросов - RELOADDOCUMENT);
- Доработаны функции парсинга ссылок во вкладке "ссылки" и в сканере сайтов.
Content Downloader X1 версии 11.01 (04.08.2014):
Обновление по просьбе клиента
- Ранее не работал параметр "инверсия" у границы парсинга 2, теперь это исправлено;
- Несколько других доработок.
Content Downloader X1 версии 11.00 (03.08.2014):
- Новый SUPER-макрос для парсинга всех характеристик товаров разом [DYNAMICVALUES] (автосоздание столбцов CSV, автоприсвоение им имен и автораспределение характеристик товаров по этим столбцам)(только для ULTIMATE-лицензий);
- БОЛЬШОЕ количество других доработок.
Content Downloader X версии 10.9998 (28.07.2014):
Обновление по просьбе клиента
- Теперь включение/отключение списка прокси для макроса шаблона вывода DOWNLOADFILE производится отдельно;
- Добавлен макрос шаблона вывода [CHECKENTRY2] (то же самое, что и [CHECKENTRY], только выполняется гораздо позже);
- Несколько других доработок.
Content Downloader X версии 10.9993 (26.07.2014):
- Добавлена поддержка экранирования части кода шаблонов повторяющихся границ парсинга;
- В редактор шаблонов повторяющихся границ парсинга (shift+ctrl+5) добавлена кнопка для вставки макроса экранирования;
- В окна {key} и {key2} добавлены функции преобразования русского текста в его процентные кодировки;
- В сканер сайтов добавлена функция записи найденных ссылок в файл;
- Добавлена поддержка вложенного использования макроса [CHECKENTRY] (теперь можно помещать один макрос [CHECKENTRY] внутрь другого);
- Множество других доработок.
Content Downloader X версии 10.9988 (23.07.2014):
- Теперь макрос шаблона вывода [DOCNAME] поддерживает символы расширенной латиницы;
- В макрос шаблона вывода [CHECKENTRY] добавлен параметр [ANYTEXT] (проверка наличия любого текста);
- Добавлен макрос шаблона вывода [JSONDECODE] (расшифровка JSON-кодировки);
- Множество других доработок.
Content Downloader X версии 10.9987 (20.07.2014):
- Ранее макрос DOWNLOADFILE мог останавливать процесс парсинга, теперь это исправлено;
- Теперь из Internet Explorer (DOM) корректно передаются unicode-символы;
- Множество доработок.
Content Downloader X версии 10.9982 (15.07.2014):
- Внутрь макроса шаблона вывода [IMAGESNAMES] теперь можно прописывать параметры: [TRANSLITE], [CLEAR] (преобразование имен в транслит, удаление лишних символов);
- Внутрь макроса шаблона вывода [IMAGESPATH] теперь можно прописывать параметры: [TRANSLITE], [CLEAR], [NOFOLDER] (преобразование имен в транслит, удаление лишних символов, игнорировать создание подпапок);
- Внутрь макроса шаблона вывода [DOCNAME] теперь можно прописывать параметры: [TRANSLITE], [CLEAR], [NOFOLDER] (преобразование имен в транслит, удаление лишних символов, игнорировать создание подпапок);
- Автоматическая подгрузка ссылок из меню - сервис - автоматизация теперь не происходит при автовозобновлении парсинга в случае бана;
- Несколько доработок.
Content Downloader X версии 10.9978 (12.07.2014):
Обновление по просьбе клиента
- Добавлен макрос шаблона вывода [GETREDIRECT] (замена всех гиперссылок в тексте на их редиректы).
Content Downloader X версии 10.9977 (10.07.2014):
- К обычным границам парсинга добавлен параметр инверсия, подробнее читаем тут http://sbfactory.ru/cd/?p=2150;
- Множество доработок.
Content Downloader X версии 10.9955 (06.07.2014):
- Теперь программа понимает и обрабатывает HTML-тег base.
Content Downloader X версии 10.9950 (04.07.2014):
Обновление по просьбе клиента
- Теперь можно отдельно включать (ctrl+r) использование прокси для макросов шаблона вывода PHP_SCRIPT и GETMORECONTENT.
Content Downloader X версии 10.9948 (30.06.2014):
- Добавлен макрос шаблона вывода [WBAPP_F] (запуск WBapp с передачей ему данных, выполняется почти перед всеми другими макросами);
- Добавлен макрос шаблона вывода [COUNT1] (аналог [COUNT], только выполняется после макроса [CHECKENTRY]);
- Множество доработок.
Content Downloader X версии 10.9947 (28.06.2014):
- Добавлен макрос шаблона вывода [CHECKENTRY] (подробнее читаем тут http://sbfactory.ru/cd/?p=261).
Content Downloader X версии 10.9942 (28.06.2014):
- В WBApp launcher (ctrl+w) добавлена функция ПРИНУДИТЕЛЬНОГО ЗАВЕРШЕНИЯ ПРОЦЕССА WBAPP.EXE после истечения заданного времени с момента запуска WBApp;
- Макрос шаблона вывода IFNIL теперь считает пустым текст, состоящий только из [CSVCS], [CSVLB] и пробелов;
- Несколько доработок.
Content Downloader X версии 10.9940 (26.06.2014):
- Теперь можно отдельно задавать файлы проекта WBApp для парсинга контента и ссылок;
- Исправлена работа макросов шаблона вывода PHP_SCRIPT_0, PHP_SCRIPT_2, PHP_SCRIPT_3, PHP_SCRIPT_4, PHP_SCRIPT_5;
- Множество других доработок.
Content Downloader X версии 10.9939 (24.06.2014):
- Теперь можно задавать любые custom headers (HTTP-заголовки) для библиотеки Clever Internet Suite (ctrl+h).
Content Downloader X версии 10.9938 (24.06.2014):
- В поле custom headers (в ctrl+h) добавлены макросы [SELF] (вставит ссылку, с которой парсите) и [PARAM] (вставит в custom headers все, что стоит после [PARAM]: в ссылке, с которой парсите);
- Теперь корректно парсятся ссылки, представленные в HTML-коде с пробелами в начале и в конце (пробелы удаляются);
- Несколько других доработок.
Content Downloader X версии 10.9937 (24.06.2014):
- В макрос шаблона вывода [SAVETOFILE] добавлен параметр {notcsv}, который отключает преобразование сохраняемого контента в CSV (отключает добавление разделителей CSV при парсинге контента в этот формат);
- Парсинг во вкладке "ссылки" теперь корректно работает с относительными ссылками, начинающимися на символ #;
- Несколько других доработок.
Content Downloader X версии 10.9933 (06.06.2014):
- Добавлена возможность задавать повторяющиеся границы парсинга внутри повторяющихся (http://sbfactory.ru/cd/?p=2020);
- В контекстные меню деревьев границ парсинга добавлен пункт включения/отключения выбранной границы парсинга;
- Множество других доработок и исправлений.
Content Downloader X версии 10.9929 (05.06.2014):
- Подправлены всплывающие подсказки для иконки программы в трее;
- В макрос шаблона вывода [SAVETOFILE] добавлен параметр {utf8}, позволяющий сохранять в файлы с UTF-8 кодировкой;
- При сворачивании программы теперь появляется BaloonHint в трее, оповещающий о том, что программа свернута в трей;
- Несколько доработок.
WBApp v 1.72
- Добавлены макросы списка событий: [IFCLICKED] и [IFNOTCLICKED] (выполнять определенные действия, если клик по кнопке удался или не удался)(смотрите кнопку "вставить в список событий дополнительные макросы" на панели инструментов WBApp);
- Несколько доработок.
Content Downloader X версии 10.9928 (28.05.2014):
- В функциях поиск-замены теперь можно экранировать символ ) макросом {parenthesis};
- Устранен баг, связанный с появлением дублей URL-адресов в окне предпросмотра парсинга ссылок (это происходило при открытом окне предпросмотра и одновременном изменении фильтров ссылок);
- Исправлена работа функции фильтрации по списку ключевиков (shift+ctrl+f) с выбранной опцией фильтрации по коду загружаемого web-документа (теперь работает корректно, если загружаемый web-документ окажется пустым);
- Множество доработок.
Content Downloader X версии 10.9923 (18.05.2014):
- В настройку повторяющихся границ парсинга (ctrl+5) добавлен параметр ограничения минимального количества циклов для каждой границы парсинга.
Content Downloader X версии 10.9922 (12.05.2014):
- При преобразовании сохраняемого документа в CSV-формат (при парсинге контента) теперь автоматически удаляются все пустые ряды ячеек.
Content Downloader X версии 10.9918 (11.05.2014):
Обновление по просьбе клиента
- Доработаны функции преобразования русского текста в транслит.
Content Downloader X версии 10.9917 (06.05.2014):
- В макрос(ы) шаблона вывода PHP_SCRIPT добавлена собственная функция преобразования данных перед отправкой (DATAENCODE, подробнее тут - http://sbfactory.ru/cd/?p=186);
- Макрос шаблона вывода [EXTRACTEMAILS] раньше мог парсить и имена файлов картинок, теперь это исправлено;
- Множество доработок.
Content Downloader X версии 10.9915 (05.05.2014):
- В макрос [DFN] добавлены следующие параметры: [CLEAR], [TRANSLITE], [NOFOLDER] (подробнее читаем тут - http://sbfactory.ru/cd/?p=261);
- Несколько других доработок.
Content Downloader X версии 10.9914 (04.05.2014):
- Макрос шаблона вывода PHP_SCRIPT теперь не заменяет & на %26 в отправляемых POST-данных;
- Макрос шаблона вывода [URLENCODE] теперь кодирует и следующие символы: &, ;, ?.
Content Downloader X версии 10.9912 (04.05.2014):
- Доработана функция авторизации методом POST (отключена функция автоматического кодирования отправляемых POST-данных в URL-кодировку), теперь нужно вставлять в окно с POST-данными авторизации текст в URL-кодировке, например, login_username=anakim7&login_password=myfancypassword&login=%C2%F5%EE%E4;
- Несколько доработок.
Content Downloader X версии 10.9910 (04.05.2014):
ОЧЕНЬ ВАЖНОЕ ОБНОВЛЕНИЕ! Обновленную документацию по использованию макросов PHP_SCRIPT смотрите тут - http://sbfactory.ru/cd/?p=186. Если у вас будут какие-либо вопросы, пожалуйста, задавайте их на форуме http://forum.sbfactory.ru/ и мы вам обязательно постараемся помочь!
- Макрос шаблона вывода PHP_SCRIPT теперь, при отправке данных, не портит URL-кодировку, например, кодируя % в %25 (если вы, в своих PHP-скриптах, применяли urldecode к POST-параметрам: urldecode($_POST["data"]), то теперь вам нужно убрать urldecode: $_POST["data"]).
Приносим извинения за возможные неудобства и очень надеемся на ваше понимание.
Content Downloader X версии 10.9908 (02.05.2014):
- Ранее, при использовании [RELOADDOCUMENT], некоторые элементы списка ссылок могли не допарситься, теперь это исправлено;
- Несколько других доработок.
Content Downloader X версии 10.9907 (01.05.2014):
- Доработана функция получения cookies из браузера (кнопка "авторизация с помощью cookies...");
- Несколько доработок.
WBApp v 1.71
- Добавлено событие [GETCOOKIES_EX] (аналог [GETCOOKIES], только используется другой метод получения кукисов).
Content Downloader X версии 10.9905 (01.05.2014):
- В макрос шаблона вывода [WBAPP] добавлен параметр [ONETHREAD] (для запуска WBApp из шаблона вывода только в одном потоке, подробнее тут http://sbfactory.ru/cd/?p=1515);
- Добавлен макрос шаблона вывода [RELOADDOCUMENT] (если он будет иметь место в коде сохраняемого документа, то произойдет повторная загрузка WEB-страницы и обработка макросов шаблона вывода);
- Доработана функция приостановки парсинга в случае бана (теперь можно приостанавливать парсинг только тогда, когда выбранная граница парсинга окажется НЕ пустой);
- Множество других доработок.
WBApp v 1.70
- Добавлено событие [GETCOOKIES] (вставит текущие Cookies из WBApp (из Internet Explorer) в настройку запросов
Content Downloader);
- Несколько доработок.
Content Downloader X версии 10.9901 (30.04.2014):
- В контекстное меню таблицы редактора CSV-файлов добавлен пункт копирования столбца в буфер;
- Устранена ошибка, связанная с некорректным отображением интерфейса, при использовании крупных объектов системы (увеличенный шрифт);
- Несколько других доработок.
Content Downloader X версии 10.99 (24.04.2014):
Обновление по просьбе клиента
- Исправлена работа макроса шаблона вывода [MUSTBEINMACRO];
- В инструмент настройки парсинга ссылок (во вкладке "ссылки" и в сканере сайтов) добавлена опция, позволяющая автоматически декодировать ссылки из URL-кодировки (кодировка с %).
Content Downloader X версии 10.98 (24.04.2014):
- Доработаны функции распознавания капчи в
Content Downloader и WBApp.
Content Downloader X версии 10.97 (24.04.2014):
- Доработан макрос шаблона вывода [URLDECODE] (добавлена поддержка раскодирования многих символов);
- Макросы шаблона вывода [IF1] и [IF2] теперь поддерживают вложенное выполнение (один внутри другого).
WBApp v 1.58
- В заголовке окна программы теперь отображается имя текущего проекта WBApp;
- Для адресной строки браузера создано контекстное меню (вызывать правым кликом) со следующими функциями: вставка текущего URL, вперед, назад, остановить, обновить, вставить из буфера.
- Несколько доработок.
Content Downloader X версии 10.95 (23.04.2014):
- WBApp больше не перехватывает фокус, когда работает в фоне.
Content Downloader X версии 10.93 (23.04.2014):
- В настройку HTTP-запросов программы (ctrl+h) добавлена опция - "работать с редиректными ссылками" (в лог парсинга, макрос CD_DOCURL! и прочие функции будет вставляться та ссылка, на которую был произведен редирект, а не оригинальная);
- Устранена ошибка в работе WBApp, связанная с уходом таймера в бесконечный минус при парсинге;
- Множество доработок.
Content Downloader X версии 10.92 (22.04.2014):
- Добавлен макрос шаблона вывода [WBAPP] (возможность вызывать WBApp и передавать ему разные данные);
- Добавлен макрос шаблона вывода [DATETOINT] (преобразование даты в число, с возможностью прибавления или отнятия указанного количества дней, для сравнения двух дат макросом [IF1]);
- Несколько доработок.
Content Downloader X версии 10.90 (20.04.2014):
- Доработан макрос шаблона вывода TOPRICE (теперь он обрабатывает цены, которые содержат в себе несколько точек или запятых, ранее он возвращал пустое значение) - Скажем спасибо господину Kagorec;
- Несколько доработок.
WBApp v 1.38
- Добавлен функционал для распознавания капч (смотрите событие CAPCHA);
- Добавлен макрос вставки первоначального URL (с которым был произведен запуск WBApp из
Content Downloader) - [ORIGINALURL];
- Добавлено событие [REFRESH] (обновить страницу);
- Множество доработок.
Content Downloader X версии 10.88 (19.04.2014):
Обновление по просьбе клиента
- Макросы шаблона вывода PHP_SCRIPT теперь поддерживают прокси (не SOCKS, при условии выбранной библиотеки INDY в ctrl+h);
- Добавлены кнопки вызова редактора поиск-замены для фильтров ссылок и для списков ссылок сканера сайтов;
- Несколько других доработок.
Content Downloader X версии 10.87 (18.04.2014):
- Теперь WBApp Работает корректно со всеми известными нам сайтами (требуется установленный Internet Explorer 11 и выше)!
- Несколько доработок.
Content Downloader X версии 10.82 (17.04.2014):
- В сканер сайтов добавлены дополнительные фильтры списка очереди ссылок;
- Добавлен макрос [DOMEN] для фильтров ссылок (обозначение домена без поддоменов);
- Несколько других доработок.
Content Downloader X версии 10.81 (16.04.2014):
- В инструменте генерации ссылок, в меню кнопки "сгенерировать ссылки", добавлен пункт "используя значения {key}" (сгенерирует список ссылок, используя список введенных ключевиков);
- В десяток раз увеличена скорость генерации большого списка ссылок с одновременным использованием макросов {num} и {key};
- Множество доработок.
Content Downloader X версии 10.80 (14.04.2014):
- Макрос шаблона вывода VARF теперь выполняется перед всеми другими макросами (теперь он имеет встроенный обработчик других макросов внутри себя);
- Множество доработок.
WBApp v 1.33
- Теперь правильно обрабатываются ссылки, содержащие в себе символ #;
- Множество доработок.
Content Downloader X версии 10.79 (10.04.2014):
- Функция преобразования в CSV-формат теперь сработавает после макроса SAVETOFILE, а для контента, сохраняемого макросом SAVETOFILE, она применяется отдельно (это устраняет проблемы с возможным нарушением структуры результирующего CSV-файла, mr. Wezzer, спасибо за наводку!);
- В макрос шаблона выода [ADDKEYS] добавлен параметр [AVOIDTAGS], который используется для избежания вставки ключей внутрь HTML-тегов ([ADDKEYS([AVOIDTAGS]3%ключи)]текст[/ADDKEYS]);
- Несколько доработок.
Content Downloader X версии 10.78 (07.04.2014):
Обновление по просьбе клиента
- Добавлен макрос шаблона вывода [ADDKEYS] (для разбавления текста ключевыми словами).
Content Downloader X версии 10.77 (07.04.2014):
- Добавлен макрос шаблона вывода [CAPCHA], который нужен для распознавания текста с картинок с помощью сервиса Antigate (настроить параметры Antigate можно в: меню - настройка - опции программы - вкладка "антикапча (Antigate)";
- Доработан макрос шаблона вывода [EXTURLS] (ранее мог не находить некоторые исходящие (внешние) ссылки).
Content Downloader X версии 10.70 (06.04.2014):
- Добавлены функции загрузки картинок и файлов на FTP-сервер при парсинге контента (меню - настройка - опции программы - вкладка "FTP");
- В фильтры ссылок добавлен чекбокс для сбора только исходящих ссылок (ведущих на другие сайты);
- Множество доработок.
Content Downloader X версии 10.59 (02.04.2014):
- Макросы шаблона вывода PHP_SCRIPT теперь могут принимать текст и в utf-8 кодировке (для этого достаточно добавить [UTF-8] в конец ссылки на скрипт).
Content Downloader X версии 10.58 (01.04.2014):
- В функцию автоопределения расширения файла, скачиваемого макросом DOWNLOADFILE, добавлено распознование расширений: .7z, .rar, .xls;
- В окне предпросмотра результата парсинга контента в виде текста теперь отображаются "невидимые" символы: переносы строк, символы табуляции и пробелов;
- Добавлена возможность указывать параметр {greedy} в начале нужной повторяющейся границы парсинга, подробнее читаем тут - http://sbfactory.ru/cd/?p=1219;
- Множество доработок.
Content Downloader X версии 10.57 (30.03.2014):
- Добавлен макрос шаблона вывода [SAVETOFILE] (сохранение разных частей документа в указанные файлы, с возможностью дозаписи);
- Несколько доработок.
Content Downloader X версии 10.55 (29.03.2014):
- Во вкладке "ссылки" появилась возможность ДОЗАПИСИ найденных URL-адресов в текстовый файл;
- Множество доработок.
WBApp v 1.25
- Макрос WAIT теперь поддерживает рандомное время ожидания, например: [WAIT]:1000-2000;
- Открываемые ссылки теперь кодируются в URL-кодировку.
Content Downloader X версии 10.51 (26.03.2014):
- Редактор CSV теперь загружает файлы со смешанным форматом ячеек: одна часть ячеек взята в контейнер, а другая - нет.
Content Downloader X версии 10.50 (26.03.2014):
CSVEditor UPDate
- Редактор CSV теперь поддерживает переносы строк в ячейках (для этого были переделаны почти все функции);
- Убрана функция отмены предыдущего действия в редакторе CSV (для ускорения работы редактора с большими файлами);
- Убрана функция перемешки строк из редактора CSV (так как она несовместима с наличием переносов строк в ячейках);
- В URLDECODE добавлена поддержка декодирования следующих символов: пробел, <, >;
- Множество доработок.
Content Downloader X версии 10.47 (25.03.2014):
- Добавлена поддержка парсинга ссылок с немецкими умлаутами;
- В контекстное меню списка ссылок добавлены функции кодирования в URL-кодировку;
- Из функции POST-авторизации убрано автоматическое преобразование POST-данных из URL-кодировки в обычную;
- В контекстное меню окна пост данных в инструменте авторизации методом POST добавлены пункты преобразования в URL-кодировку;
- Добавлены макросы шаблона вывода кодирования и раскодирования URL-кодировки (URLENCODE, URLDECODE);
- Добавлены макросы шаблона вывода кодирования и раскодирования BASE64 (BASE64ENCODE, BASE64DECODE);
- В сканер сайтов добавлен индикатор занимаемой программой оперативной памяти;
- несколько доработок.
Content Downloader X версии 10.40 (20.03.2014):
- Несколько доработок.
WBApp v 1.22
- Множество важных доработок.
Content Downloader X версии 10.38 (19.03.2014):
- Несколько доработок.
WBApp v 1.18
- Добавлен макрос списка событий [GO] (открыть указанную web-страницу);
- Ссылки теперь всегда открываются в текущем окне браузера (не в новом);
- Теперь можно передавать определенные параметры из
Content Downloader в WBApp в ссылках и вставлять их в список событий макросом [CDPARAM];
- В список событий добавлены операторы целочисленных переменных ([INT1], [INT2], ...), которым можно присваивать значения и изменять их арифметическими операциями;
- Несколько доработок.
Content Downloader X версии 10.36 (18.03.2014):
Обновление по просьбе клиента
- Устранена проблема, связанная с зависанием программы, при использовании макроса [SYN] в настройке повторяющихся границ парсинга.
Content Downloader X версии 10.35 (17.03.2014):
- В контекстное меню редактора шаблона вывода (во владке "контент") добавлен пункт для вставки макроса ;
- Несколько доработок.
WBApp v 1.14
- Default UserAgent сменен на Mozilla/5.0 (Windows NT 6.1; WOW64; rv:27.0) Gecko/20100101 Firefox/27.0;
- Добавлены хоткеи для открытия инструмента создания события клика и вставки текста/select (f7 и f8);
- Добавлена возможность выбора индекса элемента выпадающего списка в событии вставки текста/select с имитацией OnChange;
- Несколько доработок.
Content Downloader X версии 10.33 (16.03.2014):
- Добавлен макрос генерации артикула товара (SKU);
- В макросы PHP_SCRIPT добавлена обработка макросов ONELINE2;
- В список ссылок главного окна программы и очереди сканера сайтов добавлены горячие кливиши: ctrl+x (вырезать ссылки в буфер) и ctrl+v (вставить ссылки из буфера);
- В контекстное меню редактора шаблона вывода (во владке "контент") добавлены пункты для вставки макросов задания имен документов и файлов;
- Несколько доработок.
WBApp v 1.12
- Добавлена возможность применения функций поиск-замены к макросу списка событий [GETHTML];
- Несколько доработок.
Content Downloader X версии 10.29 (14.03.2014):
WBApp v 1.09
- Важная доработка счетчиков совпадений HTML-элементов.
Content Downloader X версии 10.28 (14.03.2014):
- Несколько доработок.
WBApp v 1.07
- Добавлен макрос списка событий [HTMLPOINT]...[/HTMLPOINTCHECK] (если код web-документа на "CHECK" будет отличаться от того, что был на "POINT" (изменится), то прогресс выполнения списка событий вернется обратно: на "POINT");
- Добавлены хоткеи и контекстное меню для списка событий (смотрите контекстное меню: правый клик);
- Множество доработок.
Content Downloader X версии 10.25 (11.03.2014):
WBApp v 1.05
- Добавлен макрос списка событий [REPEAT] (повтор действий заданное количество раз);
- Добавлен макрос списка событий [GETHTML] (если использовать несколько раз в списке событий, то каждый будет брать код web-документа в момент срабатывания и плюсовать его к общему результату);
- Добавлена функция просмотра текушего кода web-документа (f4).
Content Downloader X версии 10.23 (11.03.2014):
- Множество важных доработок.
Content Downloader X версии 10.22 (10.03.2014):
- Добавлен WBApp launcher (ctrl+w);
- WBApp больше не учитывает [PARAM]: в получаемых от
Content Downloader ссылках;
- Множество других доработок.
Content Downloader X версии 10.20 (10.03.2014):
WBApp UPDate
- http://sbfactory.ru/cd/?p=1515
Content Downloader X версии 10.10 (03.03.2014):
Обновление по просьбе клиента
- В макрос шаблона вывода [BREADCRUMBS] (парсинг категорий товара) добавлена возможность использовать параметр [MIN] (минимальное количество выводимых разделителей, подробнее смотрим тут http://sbfactory.ru/cd/).
Content Downloader X версии 10.09 (01.03.2014):
- Добавлен макрос шаблона вывода [MUSTBEINMACRO]текст[WHAT]что должно быть не пустым[/WHAT]текст[/MUSTBEINMACRO] (если "что должно быть не пустым" окажется пустым, то удалится все содержимое макроса [MUSTBEINMACRO]).
Content Downloader X версии 10.08 (28.02.2014):
- Друзья, несколько важных обработок сделано, прошу обновиться =)
Content Downloader X версии 10.07 (27.02.2014):
- Добавлен макрос шаблона вывода [BREADCRUMBS] (парсинг категорий товара);
- Несколько других доработок.
Content Downloader X версии 10.02 (25.02.2014):
- Добавлен макрос шаблона вывода [CSVIMAGES(метод)]html-код[/CSVIMAGES] (извлечение картинок из html-кода по заданному методу, загрузка картинок на диск и вывод через запятую их имен файлов);
- В контекстное меню окна кода (в инструменте задания границ парсинга) добавлен пункт вызова окна поиск-замены для загружаемого кода web-документа (большое спасибо господину J!Life за предоставление идеи создания этой функции);
- Несколько других доработок.
Content Downloader X версии 10.01 (24.02.2014):
- В контекстное меню дерева макросов шаблона вывода добавлена функция обнуления (сброса) выбранной границы парсинга;
- В инструмент задания границ парсинга (ctrl+f1) добавлена функция вставки данных начала и конца парсинга из другой выбранной границы парсинга (копирование другой границы парсинга)(alt+1);
- В дереве индикации задействованных функций программы и быстрого доступа к ним (во вкладке "контент") теперь отображается информация о текущем разделителе и о текущем контейнере ячеек CSV;
- Несколько других доработок.
Content Downloader X версии 10.00 (23.02.2014):
The ViewPort, enjoy...
- Во вкладке "контент" теперь дополнительно отображены: заданные границы парсинга и их имена, текст шаблона вывода, окно с отображением ВСЕХ основных настроек проекта с возможностью быстрого доступа к ним (двойной клик по элементу) - AWESOME!!!
- Теперь, при клике на макросы шаблона вывода REPLACE, подсвечиваются начало и конец этих макросов (открывающий и закрывающий "тег") - AWESOME!!!
- Теперь, при ctrl+клик в шаблоне вывода по макросу ОБЫЧНОЙ границы парсинга, в дереве макросов (слева) подсвечивается соответствующий ей элемент;
- При наведении на элементы обычных границ парсинга в дереве макросов шаблона вывода теперь отображаются порядковые номера этих самых границ парсинга (в правом-верхнем углу дерева);
- В дереве макросов редактора шаблона вывода теперь при старте программы разворачиваются группы "обработка данных" и "разное";
- Динамические границы парсинга теперь вычисляются после вставки обычных и повторяющихся границ (теперь можно использовать динамические границы парсинга внутри повторяющихся, также теперь можно использовать обычные границы парсинга в синтаксисе динамических границ);
- Теперь макросы REPLACE (в редакторе шаблона вывода) при alt+click по ним будут выделяться;
- Для выделения СЛЕДУЮЩЕГО макроса любой обычной границы парсинга теперь можно нажимать f1 в окне кода шаблона вывода;
- Для выделения СЛЕДУЮЩЕГО макроса любой повторяющейся границы парсинга теперь можно нажимать f2 в окне кода шаблона вывода;
- Для выделения нужной границы парсинга в шаблоне вывода теперь можно делать ctrl+клик по соответствующему элементу в дереве макросов;
- В контекстное меню редактора шаблона вывода добавлены пункты вставки [CSVCS] и [CSVLB];
- В редактор шаблона вывода добавлены хоткеи для вставки [CSVCS] и [CSVLB]: f3 и f4 соответственно;
- Макрос шаблона вывода TOPRICE (преобразование цены товара) теперь поддерживает и альтернативные методы округления цен: до десятых, до целых, до десятков, до сотней (по умолчанию - до сотых, для округления до десятых - поместите внутрь макроса [R-1], для округления до целых чисел - [R0], для округления до десятков - [R1], для округления до сотен - [R2]);
- Теперь, при нажатии f8 в редакторе шаблона вывода, появляется окно добавления ссылок в список ссылок главного окна программы (это многим очень часто требуется);
- В редактор шаблона вывода добавлен хоткей shift+ctrl+5 (для вызова окна редактирования повторяющейся границы парсинга 1);
- На панель инструментов главного окна программы добавлена кнопка открытия лога парсинга;
- В связи с тем, что функция КОПИРОВАНИЯ ВСЕГО ЛОГА парсинга в буфер обмена системы имела проблемы с зависанием программы на длительное время (при более 10 000 элементов в отчете ждать приходилось около 10 минут), преобразование лога в формат CSV было отключено и он копируется в буфер в том виде, в каком он и есть в памяти программы (ссылка{1}путь сохранения{2}..);
- Колоссальное количество доработок.
Content Downloader 9 версии 9.40 (14.02.2014):
- Макрос вставки случайных слов теперь выполняется до GETMORECONTENT;
- Исправлена ошибка, связанная с появлением {break} в некоторых окнах функйий поиск-замены;
- Макрос шаблона вывода [REGDOWN] теперь выполняется до [REGUPFIRST];
- Исправлена ошибка удаления и вставки столбца CSV в редакторе шаблона вывода при выбранной ячейке заголовка;
- Макрос шаблона вывода для синонимизации текста ([SYN]...[/SYN]) теперь поддерживает рандомную замену синонимов. Ранее заменял только на первый из списка. Василий, спасибо! ;)
- Теперь база синомов загружается в память программы из файла data.txt при каждом предпросмотре парсинга контента и перед каждым запуском парсинга контента (а не только с перезапуском программы, как ранее);
- Множество доработок.
Content Downloader 9 версии 9.39 (09.02.2014):
- Исправлена ошибка в работе макроса шаблона вывода [ADDTEXT].
Content Downloader 9 версии 9.38 (08.02.2014):
- Макросы шаблона вывода [IFNIL...] и функция "если граница парсинга окажется пустой..." (из "дополнительные настройки границ парсинга" (на панели инструментов)) теперь считают пустым текс, состоящий только из пробелов, переносов строк или знаков табуляций;
- Добавлен макрос шаблона вывода [REGDOWN]...[/REGDOWN] (опустит регистр текста);
- Добавлен макрос шаблона вывода [DELDUP] (удаление дублей подстрок из текста);
- Добавлен макрос шаблона вывода [ADDTEXT] (добавление заданных символов к началу или к концу каждой подстроки текста);
- Несколько доработок.
Content Downloader 9 версии 9.37 (07.02.2014):
- Макрос шаблона вывода REPLACE теперь имеет свой визуальный редактор (клик по макросу в шаблоне вывода);
- Добавлен макрос шаблона вывода [EXTRACTPHONES] (извлечение номеров телефонов из текста);
- В редакторе шаблона вывода в виде CSV (таблицы) появилась возможность вставки столбца слева или справа от выделенной ячейки (правый клик по таблице);
- Макрос шаблона вывода теперь может принимать произвольные HTTP-заголовки (смотрите описание макроса http://sbfactory.ru/cd/?p=348);
- Ранее пробелы, в начале или в конце названий папок (в макросах IMAGESPATH, DFN или DOCNAME), могли приводить к ошибкам сохранения, теперь это исправлено;
- Макрос шаблона вывода [TOTRANSLITE] теперь выполняется после ;
- Добавлены макросы шаблона вывода: [COOKIES], [USERAGENT], [CUSTOMHEADERS] (вставка cookies, user agent и custom headers из настроек HTTP-запросов программы (ctrl+h));
- Множество доработок.
Content Downloader 9 версии 9.30 (29.01.2014):
Обновление по просьбе клиента
- Кодировку загружаемых сканером сайтов документов теперь можно выставить во вкладке "ссылки" (ранее у сканера сайтов был только режим автоопределения кодировки, который не всегда корректно работал);
- Несколько доработок.
Content Downloader 9 версии 9.29 (29.01.2014):
- Исправлена работа макросов шаблона вывода [IF1] и [IF2] в ситуации, когда одно из условий макроса равно нулю;
- Несколько доработок.
Content Downloader 9 версии 9.28 (27.01.2014):
Обновление по просьбе клиента
- Изменен метод кодирования ссылок для загрузки файлов макросом шаблона вывода DOWNLOADFILE. Если у кого-либо возникнут проблемы с загрузкой файлов, прошу высылать проблемные проекты на sbfroot@gmail.com, спасибо!
Content Downloader 9 версии 9.27 (27.01.2014):
- Добавлен макрос шаблона вывода [GETGOOGLEIMAGE]запрос[/GETGOOGLEIMAGE] (сделан на основе старого Гугл API, пауза 5 секунд (для избежания бана), не работают документированные фильтры для размеров картинок (проблема старого Гугл API));
- Добавлено выпадающее меню для кнопки макроса экранирования (на панели инструментов редактора шаблона вывода (в режиме редактирования кода)) с функциями удаления макросов экранирования из текста шаблона вывода;
- Несколько доработок.
Content Downloader 9 версии 9.25 (25.01.2014):
- Теперь можно переименовывать границы парсинга в редакторе шаблона вывода (правый клик по дереву макросов при условии выделенной обычной границы парсинга);
- Макрос DFN теперь удаляет ТОЛЬКО следующие символы: "?:*<>|, остальные теперь благополучно попадают в имена файлов;
- Менеджеры макросов и шаблонов (в редакторе шаблона вывода) теперь работают и при редактировании шаблона вывода в виде таблицы;
- Для визуальной разгрузки в редакторе шаблона вывода убраны кнопки вставки HTML-тегов (прекрасная альтернатива - менеджер макросов с хоткеями);
- Большое количество мелких косметических доработок редактора шаблона вывода;
- Мелкие косметические доработки окна предпросмотра парсинга контента (перевыставлены margins у объектов);
- Множество доработок.
Content Downloader 9 версии 9.23 (23.01.2014):
Обновление по просьбе клиента
- В "папаметры HTTP-запросов программы" (ctrl+h) добавлена опция "при предпросмотре" (показывать окно Internet Explorer при предпросмотре);
- Несколько доработок.
Content Downloader 9 версии 9.22 (22.01.2014):
- Множество доработок.
Content Downloader 9 версии 9.21 (21.01.2014):
- Добавлен макрос шаблона вывода [ONELINE2] (работает аналогично [ONELINE], только выполняется после всех других макросов);
- Добавлен макрос шаблона вывода [IF1]число1 условие(>,>=,<,<=) число 2[THEN]если условие верно[ELSE]если условие не верно[/IF1];
- Множество доработок.
Content Downloader 9 версии 9.19 (17.01.2014):
- Устранена ошибка в работе макроса шаблона вывода [DOCNAME] (ранее могла появляться лишняя буква);
- Добавлен макрос шаблона вывода [IMAGESPATH]имя[/IMAGESPATH] (альтернатива IMAGESPATH, только не удаляется строка при сохранении документа, а удаляется сам макрос).
- Устранена ошибка, связанная с пропадающей кареткой в редакторе шаблона вывода (после задания границ парсинга);
- Несколько доработок.
Content Downloader 9 версии 9.18 (16.01.2014):
- В дереве макросов шаблона вывода (слева внизу) теперь отображается "настройка вывода повторяющихся границ!" (при выделении одной из повторяющихся границ). Надеюсь, теперь пользователи не будут дописывать добавляемый текст к каждому циклу повторяющейся границы в шаблон вывода, а допишут это в настройку повторяющихся границ!
- Несколько доработок.
Content Downloader 9 версии 9.17 (15.01.2014):
- Лог парсинга контента (ctrl+l) теперь отображает количество символов сохраняемого документа;
- Перед выполнением каждой новой авторизации методом POST, данные прошлой сессии полностью стираются;
- Несколько доработок.
Content Downloader 9 версии 9.15 (14.01.2014):
- Добавлен макрос шаблона вывода [IMAGESNAMES]имя[/IMAGESNAMES] (альтернатива IMAGESNAMES, только не удаляется строка при сохранении документа, а удаляется сам макрос).
Content Downloader 9 версии 9.14 (14.01.2014):
- Исправлена работа функции автоматической POST-авторизации;
- Добавлен макрос шаблона вывода [DOCNAME]имя[/DOCNAME] (альтернатива DOCSNAMES, только не удаляется строка при сохранении документа, а удаляется сам макрос);
- Ограничение на максимальную длину имен сохраняемых документов (заданных макросом DOCSNAMES, [DOCNAME]) увеличено до 247 символов (ранее было 140);
- Несколько доработок.
Content Downloader 9 версии 9.12 (12.01.2014):
Обновление по просьбе клиента
- Пустые циклы макроса шаблона вывода GETMORECYCLECONTENT теперь не плюсуются к общему результату (ранее добавлялись разделитель циклов);
- Несколько доработок.
Content Downloader 9 версии 9.10 (12.01.2014):
- Доработана система предупреждений.
Content Downloader 9 версии 9.09 (11.01.2014):
- Устранена проблема с появлением пустой строки в последней ячейке CSV (при парсинге контента);
- Несколько доработок.
Content Downloader 9 версии 9.08 (10.01.2014):
Желаем приятной работы!
- Большое количество доработок редактора таблиц в шаблоне вывода;
- Множество исправлений и доработок.
Content Downloader 9 версии 9.07 (09.01.2014):
В очередной раз выражаем вам свою искреннюю благодарность за то, что вы пользуетесь любимым
Content Downloader. Спасибо! Вы нам нужны!
- Теперь инструмент задания динамических границ парсинга корректно работает со служебными макросами разделителей ячеек [CSVCS];
- Несколько доработок и изменений.
Content Downloader 9 версии 9.05 (09.01.2014):
- Исправлена ошибка отображения содержимого ячейки при предпросмотре парсинга контента в виде CSV-таблицы (содержимое не всегда обновлялось);
- При задании нескольких обычных границ парсинга внутри повторяющейся, макросы обычных границ парсинга теперь вставляются со служебными разделителями [CSVCS] (разделитель ячеек при парсинге в CSV);
- Множество доработок.
Content Downloader 9 версии 9.04 (08.01.2014):
- Исправлена работа функции запуска планировщика при старте программы.
Content Downloader 9 версии 9.03 (08.01.2014):
Обновление по просьбе клиента
- В планировщик (на панели инструментов) добавлена опция запуска парсинга при старте программы.
Content Downloader 9 версии 9.02 (07.01.2014):
- В функцию генерации списка ссылок Добавлена возможность генерации списка ссылок в окно сканера сайтов;
- По просьбам пользователей, в редактор CSV вернули старую функцию загрузки файлов (работает быстро, но без поддержки переносов строк в ячейках);
- Несколько доработок.
Content Downloader 9 версии 9.01 (05.01.2014):
- Теперь можно увеличить или уменьшить размер шрифта в инструменте задания границ парсинга (правый клик по полю с кодом);
- Количество потоков во встроенном прокси-чекере теперь есть 50 (ранее было 10);
- Несколько доработок.
Content Downloader 9 версии 9.00 (04.01.2014):
Обновление "CSV Constructor"!
- Для шаблона вывода добавлен визуальный редактор CSV (ctrl+s в шаблоне вывода);
- Устранены утечки памяти в работе сканера сайтов;
- Большое количество доработок, изменений и исправлений.
Content Downloader 8 версии 8.9914 (14.12.2013):
- Добавлен хоткей ctrl+h для вызова окна настроек HTTP-запросов программы;
- При предпросмотре парсинга во вкладке "ссылки" или при предпросмотре парсинга в сканере сайтов теперь можно вызвать окно с кодом загружаемого web-документа (в котором производится поиск ссылок);
- Несколько доработок и исправлений.
Content Downloader 8 версии 8.9912 (12.12.2013):
- Парсинг через Internet Explorer (DOM) теперь включается и выключается отдельно для парсинга контента, ссылок и сканера сайтов (меню - настройка - настройка HTTP-запросов);
- В инструмент предпросмотра парсинга контента внесена функция добавления ссылок (f8);
- Теперь парсятся картинки с огромными alt;
- Несколько доработок и изменений.
Content Downloader 8 версии 8.9908 (12.12.2013):
- Устранена ошибка с выбором Internet Explorer (DOM).
Content Downloader 8 версии 8.9907 (12.12.2013):
- Парсинг через Internet Explorer (DOM) теперь может имитировать click по Element ID (меню - настройка - настройка HTTP-запросов);
- Несколько доработок.
Content Downloader 8 версии 8.9901 (11.12.2013):
- Парсинг через Internet Explorer (DOM) больше не имеет проблем с переполнением памяти (меню - настройка - настройка HTTP-запросов)(спасибо http://Zebroid.ru за подсказку);
- Парсинг через Internet Explorer (DOM) теперь работает в многопоточном режиме (рекомендуется использовать столько потоков, сколько есть ядер процессора);
- Несколько доработок.
Content Downloader 8 версии 8.99 (09.12.2013):
- Устранена ошибка, связанная с выводом сообщения с подтверждением очистки списка ссылок при завершении сканирования сайта.
Content Downloader 8 версии 8.98 (09.12.2013):
- Устранена ошибка, связанная со вставкой макроса в шаблон вывода при двойном клике в любое место по дереву макросов;
- Добавлен макрос шаблона вывода [CLEAR]текст[/CLEAR] (удаление текста прямо перед сохранением документа на диск);
- Множество доработок и исправлений.
Content Downloader 8 версии 8.97 (07.12.2013):
Обновление "The Soaring Eagle"!
- В сканер сайтов добавлены функции предпросмотра результатов парсинга стартового URL и предпросмотра результата парсинга выбранного URL в списке очереди ссылок;
- Большое количество косметических доработок окна сканера сайтов;
- При парсинге контента теперь грузятся картинки с // в начале url-адреса;
- Устранена ошибка парсинга относительных ссылок;
- Множестро доработок и исправлений.
Content Downloader 8 версии 8.93 (05.12.2013):
- Устранены ошибки фильтрации очереди ссылок сканера сайтов.
Content Downloader 8 версии 8.92 (05.12.2013):
- Устранена ошибка с "не меняющимся" user agent при парсинге во вкладке ссылки;
- Несколько доработок.
Content Downloader 8 версии 8.91 (04.12.2013):
- В фильтрах очереди сканера сайтов теперь поддерживаются регулярные выражения;
- Выполнены косметические доработки окна сканера сайтов;
- Несколько доработок.
Content Downloader 8 версии 8.90 (04.12.2013):
- Устранена ошибка, связанная с зависанием программы (при парсинге некоторых страниц).
Content Downloader 8 версии 8.88 (04.12.2013):
- Теперь можно парсить через Internet Explorer (DOM, с выполнением всех скриптов: "меню" - "настройка" - "настройка HTTP-запросов");
- Множество доработок.
Content Downloader 8 версии 8.87 (02.12.2013):
- Ранее некоторые WEB-страницы могли не загружаться или загружаться не полностью (это происходило из-за наличия NIL символа(ов) (#0) в коде загружаемых WEB-документов, теперь эти символы удаляются);
- Несколько доработок и изменений.
Content Downloader 8 версии 8.83 (01.12.2013):
- Предпросмотр результатов парсинга ссылок (двойной клик по элементу во вкладке ссылки) теперь отображает и отфильтрованные ссылки;
- Несколько доработок и исправлений.
Content Downloader 8 версии 8.82 (30.11.2013):
- По просьбе клиента макросы шаблона вывода [MINLENGTH] и [MAXLENGTH] теперь выполняются до загрузки картинок.
Content Downloader 8 версии 8.81 (30.11.2013):
- По просьбе клиента был добавлен макрос шаблона вывода [VARF] (то же, что и [VAR], только выполнится до загрузки картинок).
Content Downloader 8 версии 8.80 (27.11.2013):
Обновление "The Hawk"!
- Фильтры ссылок теперь поддерживают регулярные выражения!
- Множество доработок и исправлений.
Content Downloader 8 версии 8.79 (27.11.2013):
- На панель инструментов редактора шаблона вывода добавлены кнопки для задания основных настроек парсинга контента;
- Теперь в инструменте задания границ парсинга есть функция добавления ссылок (F8);
- Попытка устранить ошибку "Cannot focus a disabled or invisible window" при задании границ парсинга (Все никак вызвать у себя ее не могу, но сделал все, чтобы она не появилась. Если у вас такая ошибка появится и сейчас, прошу обратиться в Skype smartbyte_support. Спасибо!);
- Несколько доработок.
Content Downloader 8 версии 8.78 (25.11.2013):
- Теперь, если нажать ctrl и навести курсор на следующие кнопки (во вкладке "контент"): "параметры HTTP-запросов программы", "настройка парсинга картинок...", "дополнительные функции обработки контента", "фильтрация документов при парсинге", "автоматизация выполнения некоторых функций и прочее", будет выполнен быстрый просмотр настроек этих функций. Для того, чтобы окно с настройками не исчезало, отпустите зажатую клавишу ctrl на нужной кнопке.
Content Downloader 8 версии 8.77 (24.11.2013):
- Теперь можно открывать сразу несколько окон настроек парсинга контента и переключаться между ними (при перезапуске приложения открытые окна и их позиции возобновляются);
- Несколько изменений.
Content Downloader 8 версии 8.73 (23.11.2013):
- Добавлен макрос шаблона вывода [CHARCOUNT] (подсчет количества символов);
- Макросы шаблона вывода [MAXLENGTH] и [MINLENGTH] теперь выполняются сразу после [REPLACE];
- Несколько доработок.
Content Downloader 8 версии 8.72 (22.11.2013):
- Добавлены макросы шаблона вывода [MAXLENGTH] и [MINLENGTH] (указание максимальной и минимальной длины определенной части документа).
Content Downloader 8 версии 8.71 (22.11.2013):
- Несколько доработок;
- Устранено множество ошибок.
Content Downloader 8 версии 8.70 (21.11.2013):
Обновление "User Friendly"!
Проекты от старых версий программы могут не подходить (для старых проектов используйте версию программы 8.52)!
– Переработан интерфейс главного окна программы. Приятной работы!
- В инструменте задания границ парсинга теперь есть две функции автоопределения начала и конца парсинга: обычная (shift+f1) и с минимальной длиной начала и конца парсинга (shift+ctrl+f1, разработана для быстрой оценки);
- При парсинге ссылок (во вкладке "ссылки" и в сканере сайтов) теперь поддерживаются url-адреса с "//" в начале (к ним добавится либо "http:", либо "https:");
- Добавлен макрос шаблона вывода [VAR];
- Огромное количество доработок и изменений.
Content Downloader 8 версии 8.52 (07.11.2013):
В СВЯЗИ С ТЕМ, ЧТО ОБНОВЛЕНИЕ 8.50 ВЫЗВАЛО ОГРОМНУЮ МАССУ ЖАЛОБ И НЕДОВОЛЬСТВ, МЫ ПРИНЯЛИ РЕШЕНИЕ ВЕРНУТЬ СТАРЫЙ ИНТЕРФЕЙС ПРОГРАММЫ!
ЕСЛИ КТО ЖЕЛАЕТ РАБОТАТЬ С НОВЫМ ИНТЕРФЕЙСОМ, ТО ВЫ МОЖЕТЕ СКАЧАТЬ УСТАНОВЩИК отсюда http://sbfactory.ru/files/cd_install(ver_8_51_NEWCompactInterface).exe
ПРИНОСИМ СВОИ ИЗВИНЕНИЯ ЗА ПРЕДОСТАВЛЕННЫЕ НЕУДОБСТВА!
С УВАЖЕНИЕМ, АДМИНИСТРАЦИЯ SBFACTORY...
Content Downloader 8 версии 8.51 (07.11.2013):
HotFix!!!
- Исправлена ошибка с "пропаданием" некоторых настроек при загрузке проекта. Если вы увидите, что какие-либо настройки пропадают при загрузке программы или проекта, то прошу сообщить мне об этом по почте sbfroot@gmail.com. Спасибо!
Content Downloader 8 версии 8.50 (06.11.2013):
Обновление "User Friendly"!
Проекты от старых версий программы могут не подходить!
– Переработан интерфейс главного окна программы. Приятной работы!
Content Downloader 8 версии 8.01 (30.10.2013):
- Улучшена функция автоматического поиска начала и конца парсинга (в инструменте задания границ парсинга);
- Множество доработок и улучшений инструмента задания границ парсинга;
- Несколько доработок редактора шаблона вывода;
- Несколько доработок и изменений различных функций программы.
Content Downloader 8 версии 8.00 (30.10.2013):
Обновление "The Ocean"!
Ознакомиться с более подробным описанием обновления вы можете на этой странице http://sbfactory.ru/?p=3319
Обращаю ваше внимание на то, что предыдущую версию программы можно скачать по адресу http://sbfactory.ru/cdfiles (логин и пароль вы получали при покупке)!!! Надеемся, что вы по достоинству оцените наши труды! Спасибо за внимание!
– Добавлены динамические границы парсинга (макросы шаблона вывода). Задать их можно до 100 000 штук. Плюс к этому, они поддерживают регулярные выражения (альтернатива обычным и повторяющимся границам парсинга);
– Добавлена поддержка нескольких макросов {skip} для обычных и динамических границ парсинга (в повторяющихся границах парсинга поддержки нескольких {skip} нет);
– Добавлена поддержка задания альтернативного начала или конца парсинга для обычных и динамических границ парсинга;
– В инструменте задания границ парсинга теперь можно задать начало и конец автоматически (выделить нужную часть кода документа и нажать Shift+F1);
– Переработан интерфейс окна задания границ парсинга;
– Исправлена функция запуска программы с параметрами (ранее, после ~15 минут работы программы, запущенной с параметрами, появлялись ошибки). Большое спасибо тебе, Алексей, за помощь;
– Теперь, при кликах по скроллбарам web-браузера, в инструменте задания границ парсинга не происходит кратковременного подвисания программы;
– Макрос экранирования части кода шаблона вывода сменен с “” на “”;
– Океан доработок!
Content Downloader 7 версии 7.85 MK III (19.10.2013):
HotFix!!!
- Теперь, в случае "пустых" входящих числовых данных, макрос шаблона вывода TOPRICE будет возвращать пустую строку (ранее он всегда возвращал число).
Content Downloader 7 версии 7.85 MK II (18.10.2013):
HotFix!!!
- Макрос шаблона вывода IFNIL теперь выполняется практически перед всеми другими макросами шаблона вывода;
- Добавлен макрос шаблона вывода IFNIL2 (выполняется перед загрузкой картинок);
- Добавлен макрос шаблона вывода IFNIL3 (выполняется после загрузки картинок);
- Внутри макроса IFNIL теперь "работает" макрос поиск-замены REPLACE;
- Несколько доработок.
Content Downloader 7 версии 7.85 (18.10.2013):
Обновление "LiveView"!
Обращаю ваше внимание на то, что предыдущую версию программы можно скачать по адресу http://sbfactory.ru/cdfiles (логин и пароль вы получали при покупке)!!! Надеемся, что вы по достоинству оцените наши труды! Спасибо за внимание!
- В редактор шаблона вывода добавлена функция предпросмотра результата парсинга контента (без открытия окна предпросмотра) с возможностью выполнения процедуры предпросмотра как для всего кода шаблона вывода, так и для выделенной его части (ctrl+q и ctrl+w соответственно);
- В редактор шаблона вывода добавлен макрос экранирования части кода (при парсинге эта часть будет игнорироваться);
- В редактор шаблона вывода добавлена функция поиск-замены;
- При выполнении предпросмотра парсинга контента теперь отображается прогресс выполнения макросов GETMORECONTENT, GETMORECYCLECONTENT, PHP_SCRIPT и DOWNLOADFILE;
- В контекстные меню редактора шаблона вывода добавлены иконки;
- Макрос шаблона вывода IFNIL теперь срабатывает после макроса REPLACE;
- Внушительное количество доработок и исправлений.
Content Downloader 7 версии 7.78 (12.10.2013):
Обращаю ваше внимание на то, что предыдущую версию программы можно скачать по адресу http://sbfactory.ru/cdfiles (логин и пароль вы получали при покупке)!!! Надеемся, что вы по достоинству оцените наши труды! Спасибо за внимание!
- Просмотрщик картинок в редакторе CSV теперь поддерживает работу с несколькими картинками в одной ячейке;
- Функция удаления "мертвых" картинок (не имеющих файла на диске) из колонки CSV (в редакторе CSV файлов) теперь поддерживает работу с несколькими картинками в одной ячейке;
- Устранены возможные закрытия окна программы при предпросмотре парсинга контента в виде HTML;
- Устранены возможные "вылеты" программы при нажатии на кнопку "авторизация/cookies";
- В "меню" - "сервис" - "автоматизация" добвлена поддержка загрузки ссылок из файла в интернете (по url-адресу);
- Во встроенный браузер программы (IE) окна задания границ парсинга теперь передается UserAgent из: вкладка "контент" - кнопка "дополнительно", что позволяет решить проблему "устаревшей версии браузера" на некоторых web-сайтах;
- В логе парсинга (меню - сервис - смотреть лог парсинга) теперь отображается информация об удалении ранее загруженных ссылок, о загрузке ссылок из файла перед парсингом (меню - сервис - автоматизация);
- Устранены проблемы с кодировкой при восстановлении ссылок из бекапа в сканере сайтов;
- Добавлены иконки в некоторые popup menu программы;
- Опция "пытаться повторно загружать документы" (вкладка "контент" - кнопка "дополнительно") теперь имеет настройки (смотрите графическую кнопку правее флажка включения опции);
- Множество, множество доработок!
Content Downloader 7 версии 7.77 (05.10.2013):
- В редактор CSV файлов добавлена функция предпросмотра картинок из выбранной колонки таблицы (с возможностью копирования их в другую папку, удаления их с диска и из ячеек таблицы);
- В редактор CSV файлов добавлена функция удаления имен файлов картинок из ячеек таблицы, которые не имеют файла на диске (кнопка на панели инструментов "дополнительные функции обработки ячеек" - вкладка "удалить картинки, которых нет на диске");
- В редактор CSV файлов добавлена функция поска текста в колонке (ctrl+f);
- Ранее программа при загрузке занимала около 80 мегабайт памяти, теперь около 20;
- Устранены ошибки в работе сканера сайтов;
- Программа стала загружается немного быстрее;
- В редактор CSV файлов добавлены хоткеи: ctrl+o (загрузить CSV), ctrl+s (сохранить CSV), ctrl+n (очистить таблицу);
- В функции загрузки и сохранения файлов в редакторе CSV добавлены полосы прогресса (с возможностью приостановки процесса);
- Отключены все звуковые оповещения при работе через планировщик или при запуске программы с параметрами;
- Функция автобекапа в сканере сайтов стала работать быстрее и использует меньше памяти;
- Множество доработок и исправлений.
Content Downloader 7 версии 7.76 (28.09.2013):
- Повышена стабильность работы программы;
- Несколько доработок.
Content Downloader 7 версии 7.75 (27.09.2013):
- Устранены ошибки при работе программы в случае запуска с передачей параметров;
- Опция "приостановить парсинг при бане" больше не зацикливает выполнение проекта;
- Несколько доработок и исправлений.
Content Downloader 7 версии 7.70 (27.09.2013):
- Устранена ошибка, связанная с переключением кодировки на koi (при запуске программы с параметрами);
- Во встроенном планировщике программы теперь работает ctrl+c (для списка проектов).
Content Downloader 7 версии 7.60 (27.09.2013):
- Запуск программы с параметрами стал значительно удобнее. Теперь достаточно ввести один обязательный параметр (путь к проекту или planner) и, если нужно, перечислить в любом порядке дополнительные параметры: atab/scan (запуск парсинга в сохраненной вкладке/запуск сканера сайтов), close (закрыть программу после выполнения парсинга), minimize (оставлять программу свернутой в панель задач);
- Несколько доработок.
Content Downloader 7 версии 7.59 (27.09.2013):
- Теперь можно запускать программу с параметрами в свернутом виде. Для этого нужно прописать в четвертый параметр запуска 1;
- Несколько доработок.
Content Downloader 7 версии 7.58 (26.09.2013):
- Теперь, при запуске программы с параметрами, можно запускать не конкретный проект, а планировщик программы (с сохраненным в него списком проектов). Для этого нужно вместо пути к файлу проекта (первый параметр) прописать planner;
- В планировщик добавлены кнопки для опускания и поднятия проекта по списку очереди;
- Исправлена ошибка, возникающая при запуске программы из cmd.
Content Downloader 7 версии 7.57 (26.09.2013):
- Теперь возможен запуск программы с параметрами (первый параметр - путь к файлу проекта, второй параметр - что запускать (atab - запустит парсинг во вкладке (контент или ссылки), при которой был сохранен проект, scan - запустит сканер сайтов), третий параметр - закрыть программу после парсинга или нет (1 или 0));
- Доработан сканер сайтов;
- Теперь PHP_SCRIPT выполняет внутри себя практически все макросы шаблона вывода;
- Функция загрузки ссылок из файла (на панели инструментов: "добавить ссылки для парсинга" - "загрузить из файла") теперь не затирает существующие в списке ссылки, а добавляется к ним;
- Функция загрузки ссылок из файла (на панели инструментов: "добавить ссылки для парсинга" - "загрузить из файла") теперь имеет хоткей F9;
- Исправлена работа макросов шаблона вывода FILE и FILE_RANDOM (ранее, если они идут друг за другом, они могли не обрабатываться);
- Множество доработок.
Content Downloader 7 версии 7.50 (24.09.2013):
- Оптимизированы некоторые функции программы;
- Сканер сайтов теперь работает немного быстрее;
- Устранены ошибки.
Content Downloader 7 версии 7.49 (23.09.2013):
- ВАЖНО: Теперь программа корректно парсит ссылки с пробелами (функция кодирования "экзотических" символов в URL теперь отключаемая в меню - настройка - опции программы, она и создавала проблемы);
- Теперь сканер сайтов использует меньше памяти при работе;
- Множество доработок.
Content Downloader 7 версии 7.48 (23.09.2013):
- Добавлена функция загрузки ссылок из файла перед парсингом (меню - сервис - автоматизация);
- Удаление дублей списка ссылок при запуске парсинга теперь отключено для каждого проекта по умолчанию (меню - настройка - опции программы);
- Удаление дублей списка ссылок при запуске парсинга теперь происходит в фоне (без появления окна с прогрессом);
- Функция загрузки xml-карты сайта теперь понимает {br} (обозначение переноса строки);
- Несколько доработок.
Content Downloader 7 версии 7.47 (22.09.2013):
- Добавлена функция перемешивания элементов списка ссылок в случайном порядке (правый клик по списку ссылок);
- Теперь программа парсит ссылки, которые содержат в себе экзотические символы;
- Функция удаления дублей списка ссылок теперь работает на порядок быстрее;
- В "меню" - "настройка" - "опции программы" добавлена опция "удалять дубли элементов списка ссылок при запуске парсинга контента и ссылок";
- Добавлена функция удаления дублей доменов (правый клик по списку ссылок);
- Несколько доработок.
Content Downloader 7 версии 7.42 (22.09.2013):
- В "меню" - "настройка" - "опции программы" добавлена опция "обрабатывать редиректы";
- В "меню" - "настройка" - "опции программы" добавлена опция "количество попыток загрузки документов при парсинге через прокси";
- Исправлена функция копирования прокси-серверов незагруженных документов в буфер (в логе парсинга);
- Исправлен TimeOut запросов при парсинге с использованием прокси-серверов;
- Теперь функция парсинга во вкладке ссылки поддерживает повторные попытки загрузки страниц через прокси (в случае неудачной загрузки);
- Ранее, при использовании библиотеки CIS, сканер сайтов всегда пытался использовать прокси, теперь это исправлено;
- Теперь сканер сайтов, при использовании библиотеки CIS, поддерживает cookies;
- Множество доработок и исправлений.
Content Downloader 7 версии 7.39 (21.09.2013):
- В файл с загруженными элементами теперь попадают все удачно загруженные ссылки (ранее туда не попадали ссылки, например, отфильтрованные по длине);
- Ранее (при закрытии программы и при работающей процедуре парсинге контента) могли появляться ошибки, теперь это исправлено;
- Устранены критические утечки памяти в процедуре парсинга контента;
- Устранены утечки памяти в сканере сайтов (разница практически не проявляется);
- Множество доработок.
Content Downloader 7 версии 7.38 (19.09.2013):
- Исправлена ошибка в работе функции поиска по дереву макросов в редакторе шаблона вывода;
- Добавлен макрос шаблона вывода [COUNT2] (то же самое, что и [COUNT], только выполняется практически после всех других макросов);
- При задании границ парсинга для GETMORECONTENT (в инструменте задания границ парсинга) теперь можно загружать разные документы из списка;
- несколько доработок.
Content Downloader 7 версии 7.37 (15.09.2013):
- В логе выполнения функций (при предпросмотре парсинга контента) теперь отображаются записи о проверки на минимальную и максимальную длину статей;
- После удаления дублей списка ссылок индексы могли сбиваться, теперь этого не происходит;
- Макросы шаблона вывода GETMORECONTENT и GETMORECYCLECONTENT теперь имеют параметр количества попыток загрузки (меню - настройка - настройка макросов);
- Несколько доработок.
Content Downloader 7 версии 7.33 (11.09.2013):
- В редактор шаблона вывода добавлена функция предпросмотра (в режиме реального времени кода шаблона) в виде CSV (смотрите соответствующую кнопку на панели инструментов редактора шаблона вывода);
- В окне предпросмотра результатов парсинга контента теперь можно просматривать все изменения кода (в процессе выполнения макросов и функций) дважды кликая по элементу списка лога выполнения функций;
- В "меню" - "настройка" - "опции программы" теперь можно задать любой разделитель CSV для всех функций программы;
- Устранены зависания в инструменте массовой загрузки файлов;
- Несколько доработок.
Content Downloader 7 версии 7.22 (05.09.2013):
- В окне управления списком прокси-серверов теперь можно отдельно включать использование прокси для парсинга во вкладке "контент" и для парсинга во вкладке "ссылки";
- Несколько исправлений.
Content Downloader 7 версии 7.17 (04.09.2013):
- Библиотека get-запросов программы Clever Internet Suite теперь поддерживает COOKIES;
- Ранее, если создать новый проект, библиотека Clever Internet Suite не работала (помогал только перезапуск программы). Теперь эта ошибка устранена;
- Макрос шаблона вывода [COPY] теперь поддерживает параметр {POS} (определение позиции указанного символа(ов), подробнее смотрите здесь http://sbfactory.ru/cd/?p=261)
- Несколько доработок.
Content Downloader 7 версии 7.14 (31.08.2013):
- Ранее сканер сайтов не добавлял некоторые ссылки в очередь, теперь это исправлено;
- Макросы шаблона вывода GETMORECONTENT и GETMORECYCLECONTENT теперь поддерживают библиотеку CIS и прокси-сервера;
- Несколько доработок.
Content Downloader 7 версии 7.12 (22.08.2013):
- Ранее некоторые документы могли парситься без прокси (когда прокси включены), теперь эта ошибка устранена;
- Теперь в макросе [COPY] обрабатывается {sep} (альтернатива |);
Content Downloader 7 версии 7.08 (21.08.2013):
- Устранена проблема, связанная с замедлением скорости работы сканера сайтов (большое спасибо и низкий поклон за помощь в устранении этой проблемы господину Самату Садыкову (Matei)!!!);
- Добавлен макрос шаблона вывода [COPY] (обрезка лишних символов текста (скопирует часть текста и вставит ее вместо макроса));
- Несколько доработок.
Content Downloader 7 версии 7.07 (20.08.2013):
- Повышена стабильность работы процедуры парсинга контента;
- Теперь, если вы используете более 10 потоков, приоритет потоков автоматически меняется на максимальный (TIMECRITICAL);
- Множество доработок.
Content Downloader 7 версии 7.03 (19.08.2013):
- Устранена ошибка, связанная с работой прокси-серверов при парсинге контента;
Content Downloader 7 версии 7.02 (18.08.2013):
ВАЖНО!!!: Устранена ошибка, связанная с произвольным закрытием программы, если такое повторится, прошу обратиться в Skype smartbyte_support или ICQ 571-880-051, спасибо! Приносим искренние извинения за предоставленные неудобства и надеемся на ваше понимание. С уважением к вам, администрация SBFactory.ru!
- Макрос шаблона вывода IFNIL теперь не вставляет пустую строку;
- В окно добавления ссылок (F8) добавлен хоткей ctrl+enter (добавит ссылки к списку);
- Хоткеи для перехода к отмеченным элементам (shift+стрелка вверх и shift+стрелка вниз) были заменены на ctrl+стрелка вверх и ctrl+стрелка вниз;
- Несколько доработок и исправлений.
Content Downloader 7 версии 7.01 (17.08.2013):
- В инструмент задания границ парсинга добавлены кнопки: готово, отмена, сброс;
- В инструмент задания границ парсинга добавлен хоткей ctrl+enter (задание границы парсинга с последующим закрытием окна, то же самое, что и кнопка готово);
- Несколько доработок.
Content Downloader 7 версии 7.00 (17.08.2013):
ВНИМАНИЕ!!!
Content Downloader 7 будет установлен в другую папку, отличную от папки с
Content Downloader 3 (в ПУСКе также появится новый пункт меню для
Content Downloader 7)!!!
Теперь есть четыре версии
Content Downloader:
- Start (до 5 потоков);
- Standard (до 10 потоков);
- EXTENDED (до 25 потоков)(ВСЕ, КТО РАНЕЕ ИМЕЛ ЛИЦЕНЗИЮ EXTENDED ТЕПЕРЬ ИМЕЮТ ЛИЦЕНЗИЮ ULTIMATE!!!);
- ULTIMATE (до 50 потоков);
Изменения и доработки:
- Теперь программа кеширует загружаемые web-документы при предпросмотре и задании границ парсинга (это позволяет быстро загружать просмотренные ранее web-документы);
- Ранее программа не могла загрузить некоторые web-страницы, теперь это исправлено (к случаям с баном web-сайта или не ответа на некорректный для сайта GET-запрос программы это исправление не относится);
- Список ссылок в окне задания границ парсинга теперь работает на новом быстром компоненте и использует данные из главного списка ссылок программы (это значительно ускорило работу со списком ссылок в окне задания границ парсинга и позволило освободить дополнительную память);
- Список ссылок в окне предпросмотра парсинга контента теперь работает на новом быстром компоненте и использует данные из главного списка ссылок программы (это значительно ускорило работу со списком ссылок в окне предпросмотра парсинга контента и позволило освободить дополнительную память);
- Список ссылок в окне задания границ парсинга теперь нумеруется;
- Список ссылок в окне предпросмотра парсинга контента теперь нумеруется;
- Кодировки в окне задания границ парсинга теперь не сбиваются;
- В окне задания границ парсинга теперь работает библиотека CIS;
- Теперь выбранная кодировка загружаемого web-документа сохраняется при закрытии окна задания границ парсинга (ранее кодировка сохранялась только при нажатии кнопки "готово");
- Теперь работает функция просмотра ссылки (без "http://") в браузере из окна задания границ парсинга и окна предпросмотра парсинга контента;
- Для списков ссылок (кроме списков ссылок сканера сайтов) добавлены хоткеи: insert (маркировка выделенного элемента) и ctrl+insert (маркировка выделенного элемента с выделением следующего по списку элемента);
- Теперь признак маркированности ссылки сохраняется в файлы проектов и загружается из них;
- Теперь можно редактировать отдельные элементы списка ссылок главного окна программы (F2);
- Для выделения следующего и предыдущего маркированного элемента в списке ссылок добавлены хоткеи shift+стрелка вниз и shift+стрелка вверх;
- Интерфейс окна задания границ парсинга стал более удобным;
- Огромное количество незначительных доработок, исправлений и изменений!
Content Downloader 3 версии 3.9987 (06.08.2013):
- Теперь при работе планировщика программы фокус других активных приложений не теряется;
- Для открытия окна планировщика и запуска планировщика теперь можно использовать хоткей ctrl+p;
- В настройку повторяющихся границ парсинга (на панели инструментов) добавлены макросы [CC] и [CC2] (для вывода номеров циклов повторяющихся границ парсинга).
Content Downloader 3 версии 3.9985 (03.08.2013):
- Теперь можно задавать рандомное значение паузы между запросами при парсинге контента и ссылок (ОТ-ДО);
- База синонимов теперь загружается только перед процедурой синонимизации. Это незначительно ускорило загрузку программы и освободило около 12 мегабайт занимаемой оперативной памяти;
- Теперь список прокси серверов можно пополнять без их проверки программой;
- Теперь удаляется папка cache при выходе из программы;
- Множество доработок.
Content Downloader 3 версии 3.9983 (14.07.2013):
- Несколько доработок и исправлений.
Content Downloader 3 версии 3.9982 (11.07.2013):
- Теперь парсятся картинки с символом ' в ссылке;
- Исправлена ошибка в работе функции автоматической смены шаблонов вывода при парсинге.
Content Downloader 3 версии 3.9981 (10.07.2013):
- При парсинге контента теперь можно автоматически менять шаблоны вывода из менеджера шаблонов (смотрите описание обновления на сайте);
- Добавлен макрос шаблона вывода [FKEY] (смотрите описание обновления на сайте);
- Множество доработок.
Content Downloader 3 версии 3.9980 (02.07.2013):
- Устранены проблемы, связанные с отрисовкой списка элементов в окне лога парсинга;
- Добавлен хоткей ctrl+a для выделения всех элементов из списка в окне лога парсинга;
- Несколько исправлений.
Content Downloader 3 версии 3.9978 (02.07.2013):
- Макрос шаблона вывода [DFN] теперь не заменяет пробелы на знаки нижнего подчеркивания;
- Устранены зависания программы при парсинге контента, связанные с неудачными попытками создать директорию на диске;
- Макрос шаблона вывода DOWNLOADFILE теперь работает с относительными путями файлов, содержащими в себе "../";
- Лог парсинга теперь отображает количество загруженных картинок и файлов для каждого документа;
- Добавлен хоткей ctrl+l для вызова лога парсинга;
- Теперь колонки окна лога парсинга маркируются цветом через одну (для удобства чтения);
- Теперь сохраняются размеры колонок окна лога парсинга при выходе из программы;
- Несколько доработок и изменений.
Content Downloader 3 версии 3.9977 (01.07.2013):
- Добавлен макрос шаблона вывода [DFN]папка\имя файла{ext}расширение[/DFN] (задание имен файлов, загружаемых макросом DOWNLOADFILE, может вызываться перед каждым DOWNLOADFILE в документе);
- Настройки планировщика и список проектов в планировщике теперь сохраняются при закрытии программы.
Content Downloader 3 версии 3.9903 (29.06.2013):
- В сканер сайтов добавлена функция поиска ссылок между заданными границами (кнопка "настройка" в окне сканера сайтов);
- Устранена ошибка "out of memory" при создании файла импорта в WP с использованием макроса [CATS];
- Устранена потеря скорости парсинга контента при использовании макроса шаблона вывода DOWNLOADFILE;
- Теперь при парсинге контента с подключенным "файл с загруженными элементами" [PARAM] в ссылках не учитывается (одна и та же ссылка с разными значениями [PARAM] теперь будет считаться одинаковой);
- Макросы шаблона вывода GETMORECONTENT и GETMORECYCLECONTENT теперь поддерживают замену HTML мнемоников;
- Множество очень незначительных доработок интерфейса;
- Несколько исправлений ошибок программного кода.
Content Downloader 3 версии 3.9902 (22.06.2013):
- Устранены проблемы связанные с добавлением нового макроса в менеджер из редактора шаблона вывода.
Content Downloader 3 версии 3.9901 (22.06.2013):
- Исправлена работа [SELECTED] в менеджере макросов;
- При переименовании картинок с одинаковыми именами (при парсинге контента) теперь используются: имя-1, имя-2, имя-3, вместо: имя_1, имя_2, имя_3;
- Несколько доработок.
Content Downloader 3 версии 3.99 (21.06.2013):
- В программу добавлен менеджер шаблонов вывода и менеджер макросов (позволяет сохранять, редактировать, загружать различные шаблоны вывода и макросы, вызывается из панели инструментов редактора шаблона вывода);
- Уменьшено задействование памяти при парсинге контента и сканировании сайта (от 2 до 20 процентов при 50 потоках);
- Множество доработок.
Content Downloader 3 версии 3.98 (04.06.2013):
- Добавлена функция замены мнемоников (вкладка "контент" - группа "общее" - графическая кнопка "настроить функции замены специальных символов и преобразования текста в одну строку");
- В настройку макроса шаблона вывода FILE добавлена опция "удалять строки";
- Несколько доработок.
Content Downloader 3 версии 3.97 (20.05.2013):
- В поиск по дереву макросов (в редакторе шаблона вывода) добавлена функция "Ctrl+F - искать далее";
- В инструмент предпросмотра результатов парсинга контента добавлен лог загрузки картинок и лог загрузки файлов макросом шаблона вывода DOWNLOADFILE;
- Несколько доработок и исправлений.
Content Downloader 3 версии 3.93 (17.05.2013):
- Добавлена функция поиска по дереву макросов в редакторе шаблона вывода;
- Добавлен макрос шаблона вывода SHAKE (перемешка элементов с любым разделителем в тексте);
- Добавлен макрос шаблона вывода CD_DOCPATH!;
- Добавлен макрос шаблона вывода FILE_RANDOM (вставка рандомной строки из файла);
- Добавлен макрос шаблона вывода EXTURLS (вывод всех исходящих ссылок из кода загружаемого web-документа);
- Несколько доработок и исправлений.
Content Downloader 3 версии 3.92 (14.05.2013):
- Макрос шаблона вывода TOPRICE теперь работает со всеми арифметическими операциями, также появилась возможность задать несколько операций сразу (http://sbfactory.ru/cd/?p=261);
- В редактор шаблона вывода добавлена нижняя строка (аналогичая строке заголовка/верхней строке);
- Доработан макрос шаблона вывода GETMORECONTENT;
- В окне предпросмотра парсинга контента теперь отображается информация о задействованных функциях и их порядке выполнения, о макросах PHP_SCRIPT и GETMORECONTENT;
- В окне предпросмотра парсинга контента теперь можно редактировать шаблон вывода;
- Множество доработок.
Content Downloader 3 версии 3.90 (09.05.2013):
- Глобальная функция htm to txt (во вкладке "контент") теперь не удаляет макросы шаблона вывода из дополнительных настроек границ парсинга;
- Макрос шаблона вывода DOWNLOADFILE теперь выполняется после процедуры загрузки картинок;
- Теперь макрос шаблона вывода GETMORECONTENT поддерживает вложенное выполнение другого макроса GETMORECONTENT (внутри себя);
- Добавлена функция сохранения ссылок не загруженных документов в файл при парсинге (меню - сервис - смотреть лог парсинга);
- Устранены проблемы с сохранением шапки шаблона вывода при парсинге в 1 файл с использованием макроса DOCSNAMES;
- Макросы границ парсинга теперь обрабатываются и в тексте подключаемых файлов (макрос шаблона вывода FILE);
- Несколько доработок.
Content Downloader 3 версии 3.88 (26.04.2013):
- Несколько доработок.
Content Downloader 3 версии 3.87 (22.04.2013):
- В логе парсинга (меню - сервис - смотреть лог парсинга (отчет)) появилась возможность скопировать в буфер адреса только тех документов, которые не удалось загрузить (правый клик по списку);
- Макрос шаблона вывода DOWNLOADFILE теперь поддерживает загрузку файлов с русскими символами в url-адресе;
- Добавлена функция отображения текущих документов при парсинге контента (меню - сервис - текущие элементы при парсинге во вкладке "контент");
- Добавлена функция обрезки больших документов при парсинге контента (меню - настройка - опции программы - вкладка "общее" - максимальное количество символов в загружаемом документе);
- Теперь, если поток "умирает", процесс парсинга больше не останавливается (настроить функцию: меню - настройка - опции программы - вкладка "потоки" - через сколько секунд проверять "зависли" потоки или нет);
- Множество доработок.
Content Downloader 3 версии 3.79 (17.04.2013):
- Исправлена ошибка в работе макроса DOWNLOADFILE (спасибо всем, кто о ней сообщил, приношу свои извинения за неудобства).
Content Downloader 3 версии 3.78 (16.04.2013):
- Добавлена функция автоматической авторизации методом POST (кнопка "авторизация/cookies" - вкладка "авторизация методом POST");
- КРИТИЧНО: Устранены ошибки при парсинге контента в 1 файл;
- Множество доработок.
Content Downloader 3 версии 3.77 (05.04.2013):
- Добавлен макрос шаблона вывода [NEXTFILE] (с помощью него можно парсить с одного url-адреса в разные файлы, смотрите описание обновления на сайте);
- В инструменте добавления файлов с диска теперь работает ctrl+a (выделить все файлы для добавления);
- Теперь макрос шаблона вывода IMAGESNAMES автоматически удаляет запятые из имен файлов изображений;
- Теперь можно кликать колесиком мыши по ссылке из списка для открытия ее в web-браузере;
- Теперь макрос шаблона вывода [TOTRANSLITE] вставляется с параметрами regdown, clear, convertspaces;
- Множество доработок.
Content Downloader 3 версии 3.48 (19.03.2013):
- Исправлена ошибка при предпросмотре парсинга контента при сохранении в один файл с опцией дозаписывания.
Content Downloader 3 версии 3.47 (18.03.2013):
- Теперь можно дозаписывать в файл или перезаписывать файл при парсинге контента;
- Теперь макрос шаблона вывода DOCSNAMES работает и при парсинге контента в 1 файл;
- Парсинг Google картинок теперь можно производить сохраняя изображения с именами в транслите;
- Теперь при создании нового проекта окна сканера сайтов очищаются автоматически;
- В программу добавлено несколько хоткеев (смотрите описание этого обновления на сайте);
- Несколько доработок.
Content Downloader 3 версии 3.37 (11.03.2013):
- Теперь можно изменять размер окна сканера сайтов;
- Добавлен макрос шаблона вывода EXTRACTEMAILS (парсинг e-mail адресов со страницы/из текста);
- Добавлен макрос шаблона вывода MUSTBEINLINE (удаление строки из документа, где не окажется текста в пределах макроса);
- Множество доработок.
Content Downloader 3 версии 3.33 (01.03.2013):
Поздравляем всех с первым днем весны!
- В парсере Google картинок появилась возможность назначать имена файлов сохраняемым изображениям согласно запросу.
Content Downloader 3 версии 3.30 (18.02.2013):
- Добавлены макросы шаблона вывода PHP_SCRIPT_0 и PHP_SCRIPT_5 (http://sbfactory.ru/cd/?p=559);
- Подправлена функция загрузки карты сайта;
- Несколько доработок.
Content Downloader 3 версии 3.28 (17.02.2013):
- Теперь во вкладке "ссылки" поддерживается поиск адресов файлов из любой указанной папки на локальном диске (например, SCANDIR:c:\content\ - найдет все файлы в папке c:\content\);
- Добавлен макрос шаблона вывода [INT_ID2] (вставка нарастающего числового ID, аналогично макросу [INT_ID]);
- Несколько доработок.
Content Downloader 3 версии 3.27 (15.02.2013):
- Функция загрузки карты сайта (и парсинг во вкладке "ссылки" с включенной опцией "подключить обработчик sitemap.xml") теперь поддерживает сразу несколько разных границ для поиска ссылок (полезно при парсинге с нескольких разноформатных карт сайтов);
- Несколько доработок.
Content Downloader 3 версии 3.25 (03.02.2013):
- В редакторе CSV файлов появилась возможность указать разделитель ячеек (по умолчанию это точка с запятой);
- Добавлен макрос шаблона вывода [TOTRANSLITE:]...[/TOTRANSLITE] (преобразование текста в транслит);
- Несколько доработок.
Content Downloader 3 версии 3.22 (01.02.2013):
- На порядок увеличена скорость работы функции слияния двух CSV в редакторе CSV файлов;
- В редактор CSV файлов добавлена строка просмотра и редактирования ячеек;
- Несколько доработок.
Content Downloader 3 версии 3.18 MK III (27.01.2013):
- Устранена ошибка в работе макроса шаблона вывода DOWNLOADFILENAMES (ранее были проблемы с использованием параметра {ext}).
Content Downloader 3 версии 3.18 MK II (27.01.2013):
- В редактор CSV файлов добавлена функция удаления дублей слов (или других значений) из ячеек указанного столбца (на панели инструментов: "дополнительные функции обработки ячеек" - вкладка "удаление дублей в ячейках").
Content Downloader 3 версии 3.18 (27.01.2013):
- В фильртах ссылок появилась возможность выбора момента применения функции поиск-замены для ссылок: до или после применения фильтров;
- В редактор CSV файлов добавлена функция перемешки строк в случайном порядке;
- В редактор CSV файлов добавлена функция объединения содержимого ячеек двух выбранных столбцов.
Content Downloader 3 версии 3.17 (23.01.2013):
- Устранена ошибка, связанная с отсутствием переноса строки для второго документа при парсинге контента в 1 файл.
Content Downloader 3 версии 3.12 (21.01.2013):
- Устранена ошибка, связанная с появлением пустой строки в начале документа при парсинге контента в 1 файл.
Content Downloader 3 версии 3.11 (17.01.2013):
- Доработана функция "приостановить парсинг в случае бана" (отныне "приостановить парсинг при бане") при парсинге контента (появилась возможность указать номер обязательной границы парсинга).
Content Downloader 3 версии 3.10 (14.01.2013):
- В редакторе CSV файлов теперь обрабатываются документы в UTF-8 кодировке;
- Доработан макрос шаблона вывода DIGIFILTER;
- Несколько доработок.
Content Downloader 3 версии 3.08 (29.12.2012):
- При парсинге контента теперь не добавляется пустая строка в конец файла(ов);
- В список ссылок добавлена функция сортировки по алфавиту (смотрите в контекстном меню);
- Несколько доработок.
Content Downloader 3 версии 3.07 MK II (18.12.2012):
- Макрос шаблона вывода GETGOOGLEIMAGE теперь принимает cookies из вкладка "контент" - кнопка "дополнительно";
- Несколько доработок.
Content Downloader 3 версии 3.07 (18.12.2012):
- При предпросмотре результата парсинга контента в виде html встроенный браузер теперь не подвисает;
- Множество доработок.
Content Downloader 3 версии 3.02 (16.12.2012):
- Доработан планировщик;
- Доработан макрос шаблона вывода DOCSNAMES;
- Множество доработок.
Content Downloader 3 версии 3.01 (14.12.2012):
- Устранена ошибка в работе макроса шаблона вывода DOCSNAMES;
- Устранена ошибка, связанная с долгим закрытием программы.
Content Downloader 3 версии 3.00 (14.12.2012):
После обновления потребуется переактивировать программу (перед обвновлением смотрите ваш ключ в "меню" - "справка" - "о программе")!
- Основные списки ссылок программы теперь работают на новом БЫСТРОМ компоненте;
- Поддержка SOCKS прокси;
- Сканер сайтов теперь обрабатывает относительные ссылки, которые начинаются с символа ?;
- Устранены ошибки в работе планировщика;
- Теперь запуск всегда осуществляется с правами администратора;
- Лимит добавления ссылок в список через F8 теперь значительно увеличен;
- Добавлены полосы прогресса практически во все функции работы со списками ссылок;
- Доработан макрос шаблона вывода DOCSNAMES (ранее из-за него программа могла зависнуть);
- Добавлена опция "пытаться повторно загружать документы" при парсинге контента (вкладка "контент" - кнопка "дополнительно");
- В списке прокси-серверов при проверке proxy теперь можно указать url-адрес сайта, к которому будут производиться запросы (для определения работоспособности прокси именно на указанном сайте);
- В макрос шаблона вывода GETMORECONTENT добавлен параметр auto (автоматический поиск текста статьи в коде документа);
- Макрос шаблона вывода [CATS] (для импорта рубрик в WordPress) теперь можно использовать несколько раз в одном документе (для импорта одной статьи в несколько рубрик WordPress);
- Множество доработок.
Content Downloader II версии 2.93 (17.11.2012):
- Огромное количество доработок!
Content Downloader II версии 2.92 (09.11.2012):
- Ранее HTTP прокси с авторизацией не работали, теперь работают;
- Макрос шаблона вывода DOWNLOADFILE теперь поддерживает загрузку файлов через прокси;
- Несколько доработок.
Content Downloader II версии 2.91 (08.11.2012):
- Несколько доработок.
Content Downloader II версии 2.90 (06.11.2012):
- Появилась поддержка HTTP прокси формата login:pass@ip:port;
- Парсинг во вкладке "ссылки" теперь поддерживает прокси;
- Доработан встроенный ProxyChecker;
- Теперь прокси поддерживает инструмент задания границ парсинга;
- Множество доработок.
Content Downloader II версии 2.88 (05.11.2012):
- Отчет парсинга теперь работает и при парсинге во вкладке ссылки;
- Теперь в отчете парсинга поддерживается multiselect и копирование выделенных ссылок в буфер обмена (правый клик);
- Во вкладку ссылки добавлена кнопка авторизации;
- Во вкладку ссылки добавлен CheckBox "приостановить парсинг в случае бана";
- Несколько доработок.
Content Downloader II версии 2.87 (03.11.2012):
- При предпросмотре результата парсинга ссылок (во вкладке "ссылки") из окна с найденными ссылками теперь можно вызвать окно фильтров ссылок, причем при изменении фильтров ссылок, будет меняться список найденных ссылок (в реальном времени);
- Список прокси теперь не загружается и не сохраняется вместе с файлом проекта, он стал единым для всех проектов;
- В окно задания границ парсинга добавлен CheckBox "авто" (для автоматического присвоения имени задаваемой границы парсинга);
- Несколько доработок.
Content Downloader II версии 2.85 (26.10.2012):
- Во вкладке "ссылки" теперь появилась возможность парсить xml карты сайтов;
- Несколько доработок и изменений.
Content Downloader II версии 2.82 (23.10.2012):
- В инструмент добавления файлов с диска (панель инструментов - "добавить ссылки для парсинга" - "добавить файлы с диска") добавлена функция поиска файлов в подкаталогах выбранной директории (правый клик по дереву);
- Макрос шаблона вывода DOWNLOADFILENAMES_ теперь поддерживает не только задание имени файла, но и папки;
- Несколько доработок и изменений.
Content Downloader II версии 2.81 (09.10.2012):
- Добавлена возможность запускать приложения с передачей параметров перед парсингом контента (вкладка "контент" - кнопка "дополнительно").
Content Downloader II версии 2.80 (05.10.2012):
- Добавлена возможность запускать приложения с передачей параметров после парсинга контента (вкладка "контент" - кнопка "дополнительно");
- Несколько доработок.
Content Downloader II версии 2.79 (06.09.2012):
- Доработан макрос шаблона вывода [IFNIL] (и разделитель данных теперь не [SEP], а [ELSE]).
Content Downloader II версии 2.78 (05.09.2012):
- Доработан макрос шаблона вывода [IFNIL] (и разделитель данных теперь не |, а [SEP]).
Content Downloader II версии 2.77 (01.09.2012):
- Добавлена возможность использовать альтернативную библиотеку для GET-запросов программы, так как со стандартной библиотекой некоторые web-страницы не загружались (меню - настройка - опции программы);
- В сканер сайтов добавлена функция копирования неудачно загруженных ссылок в буфер обмена системы;
- Макрос DOWNLOADFILENAMES теперь удаляет из имен файлов все символы кроме цифр, букв, тире и нижнего подчеркивания;
- Добавлен макрос шаблона вывода [REGUPALL] (поднимает регистр всех букв в указанном тексте);
- Несколько доработок.
Content Downloader II версии 2.70 (07.08.2012):
- В параметре URL макроса GETMORECONTENT и макроса GETMORECYCLECONTENT теперь обрабатываются PHP_SCRIPT;
- Несколько исправлений и доработок.
Content Downloader II версии 2.59 (02.08.2012):
- Исправлена ошибка с отсутствием шапки CSV при сохранении в UTF-8 Без BOM;
- Теперь при парсинге ссылок панель с полосой прогресса появляется не под статус баром, а выше.
Content Downloader II версии 2.57 (01.08.2012):
- Добавлена возможность задавать любые custom headers к http-запросам программы (вкладка "контент" - кнопка "дополнительно");
- Несколько доработок.
Content Downloader II версии 2.47 (27.07.2012):
- При создании XML-файла импорта в WordPress nicename рубрик теперь генерируется правильно;
- Исправлена функция построения повторяющихся границ парсинга;
- Множество доработок и исправлений.
Content Downloader II версии 2.40 (24.07.2012):
- Добавлена поддержка кодировки ISO.
Content Downloader II версии 2.39 (17.07.2012):
- Количество колонок в редакторе CSV файлов увеличено с 50 до 1200;
- Окно настройки повторяющихся границ в редакторе шаблона вывода теперь не закрывается при закрытии шаблона вывода и вызове окна с настройкой всех повторяющихся границ;
- В StatusBar сканера сайтов Добавлен счетчик скорости загрузки документов;
- В окне задания границ парсинга доработаны некоторые функции скроллинга окна с кодом;
- Множество доработок и исправлений.
Content Downloader II версии 2.38 (16.07.2012):
- Теперь при загрузке карты сайта старые ссылки не удаляются;
- Доработана функция фильтрации документов по списку ключевиков;
- В "настройка повторяющихся границ" (на панели инструментов) теперь можно выставить ограничение на максимальное количество циклов в выбранной повторяющейся границе;
- Несколько доработок.
Content Downloader II версии 2.37 (11.07.2012):
- Исправлена ошибка, связанная с разделителем дробной части чисел в функциях программы;
- Добавлен макрос шаблона вывода [REGUPFIRST]текст[/REGUPFIRST] (поднимает регистр первой встретившейся буквы в тексте);
- Исправлена ошибка, связанная с присвоением имен сохраняемым документам.
Content Downloader II версии 2.33 (10.07.2012):
- Теперь можно прописывать макросы в настройку повторяющихся границ прямо в редакторе шаблона вывода;
- Исправлена функция парсинга картинок из Google;
- Теперь статусбар отображает примерное количество времени до завершения парсинга контента и парсинга ссылок;
- Доработана функция преобразования имен сохраняемых картинок в транслит (при парсинге контента);
- Добавлена функция удаления пробелов в начале и в конце каждой ссылки из списка в главном окне программы (правый клик по списку ссылок - "удалить пробелы в начале и в конце каждой ссылки");
- Множество доработок, изменений и исправлений.
Content Downloader II версии 2.31 (01.07.2012):
- Тепер при предпросмотре результатов парсинга контента в CSV запоминается положение левой колонки и верхней строки (обновление по убедительной просьбе одного человека).
Content Downloader II версии 2.30 (30.06.2012):
- Добавлен макрос шаблона вывода [POST_DATE]1987-07-20 06:33:07[/POST_DATE] (назначение даты публикации записям при создании файла импорта WordPress);
- Устранена ошибка, связанная с сохранением непустых документов;
- Несколько доработок.
Content Downloader II версии 2.27 (27.06.2012):
- Появилась возможность загружать проекты от старых версий программы (меню - файл);
- Несколько доработок.
Content Downloader II версии 2.22 (24.06.2012):
- Устранены проблемы с активацией;
- Несколько доработок.
Content Downloader II версии 2.20 (20.06.2012):
- В шаблон вывода добавлено несколько макросов;
- Исправлена работа планировщика в режиме использования сканера сайтов (спасибо Sole Fasces).
Content Downloader II версии 2.17 (08.06.2012):
- В шаблон вывода добавлены макросы вставки текущей даты и времени;
- В сканере сайтов снят фильтр на добавление в очередь ".xml" ссылок.
Content Downloader II версии 2.15 (05.06.2012):
- Макрос шаблона вывода [SOURCE] переименован в [DOCSOURCE] (так как [SOURCE] может встречаться в некоторых web-документах);
- Несколько доработок и исправлений.
Content Downloader II версии 2.14 (01.06.2012):
- Добавлен макрос шаблона вывода IFNIL (читайте описание в редакторе шаблона вывода);
- Несколько доработок и исправлений.
Content Downloader II версии 2.11 (29.05.2012):
- Введена поддержка парсинга ".рф" доменов.
Content Downloader II версии 2.10 (27.05.2012):
- Теперь шаблон вывода можно использовать не задавая ни одной границы парсинга (просто поставить галочку);
- Добавлен макрос шаблона вывода [SOURCE] (вывод текста загружаемого web-документа).
Content Downloader II версии 2.01 (27.05.2012):
- Значительно доработана и расширена функция фильтрации документов по списку ключевиков;
- Появилась возможность указать кодировку для макроса шаблона вывода GETMORECONTENT: utf-8, koi, ansi;
- Несколько доработок и исправлений.
Content Downloader II версии 2.00 (20.05.2012):
Большое количество доработок!
Старые проекты, где используются повторяющиеся границы парсинга могут не подойти!
После обновления может потребоваться переактивация программы (перед обвновлением посмотрите ваш ключ в "меню" - "справка" - "о программе")!
- Полностью переработан редактор шаблона вывода;
- Переработана настройка повторяющихся границ парсинга;
- Добавлена возможность задавать обычные границы парсинга внутри повторяющихся (одна из самых важных доработок!);
- Макрос шаблона вывода TOPRICE теперь округляет числа до 2 знаков после запятой;
- Теперь при предпросмотре парсинга контента (CSV) количество колонок не фиксированное (как ранее), а увеличивается автоматически;
- В сканер сайтов добавлена функция удаления перечисленных параметров из ссылок списка очереди;
- В отчет парсинга контента добавлена функция копирования web-адресов загруженных документов в буфер обмена системы (правый клик по списку ссылок лога);
- Большое количество доработок, изменений и исправлений.
Content Downloader версии 32.00 (24.04.2012):
- Добавлен макрос шаблона вывода [DIGIFILTER]...[/DIGIFILTER] (фильтрация документов по условию: число с web-страницы больше, меньше либо равно заданному);
- Несколько доработок и исправлений.
Content Downloader версии 31.97 (08.04.2012) (по убедительной просьбе Bork75):
- В инструмент массовой загрузки файлов добавлена функция распределения файлов по подпапкам согласно уровням url-адреса.
Content Downloader версии 31.88 (06.04.2012):
- Появилась возможность записывать адреса загруженных web-страниц в txt-файл (включите соответствующий чекбокс в меню - сервис - смотреть лог парсинга контента (отчет));
- Несколько доработок.
Content Downloader версии 31.87 (29.03.2012):
- В макросе шаблона вывода GETMORECONTENT теперь можно использовать параметр SELF (http://sbfactory.ru/cd/?p=348);
- Несколько доработок.
Content Downloader версии 31.77 (20.03.2012):
- Функция загрузки картинок теперь передает referer;
- Добавлена функция удаления выделенного элемента при предпросмотре результатов парсинга контента;
- Переработана функция загрузки карты сайта;
- Доработана функция удаления дублей ссылок с использованием [PARAM];
- Множество доработок и исправлений.
Content Downloader версии 31.14 (19.02.2012):
- Теперь при задании границ парсинга и при предпросмотре результата парсинга контента можно загружать ссылки из списка не только двойным кликом, но и стрелками: влево, вправо, а также клавишей ENTER;
- Несколько доработок.
Content Downloader версии 31.07 (16.02.2012):
- Исправлена функция переименования изображений при парсинге контента.
Content Downloader версии 31.00 (16.02.2012):
- В фильтры ссылок добавлена функция поиск-замены.
Content Downloader версии 30.93 (15.02.2012):
- Доработана функция переименования изображений при парсинге контента;
- Увеличено окно настройки повторяющихся границ парсинга;
- Несколько доработок.
Content Downloader версии 30.84 MK II (12.02.2012):
- Оптимизирована работа программы при парсинге контента в 1 файл.
Content Downloader версии 30.84 (12.02.2012):
- Теперь контент можно сохранять в utf-8 без BOM;
- Теперь можно применять фильтры для обработки существующего списка ссылок очереди сканера сайтов (правый клик по списку);
- Несколько доработок.
Content Downloader версии 30.77 (11.02.2012) (Обновление по просьбе человека):
- Теперь есть поддержка редиректов при загрузке картинок, геренируемых PHP-скриптом (при парсинге контента).
Content Downloader версии 30.70 (10.02.2012) (Обновление по просьбе человека):
- Доработан макрос шаблона вывода WEBASYSTIMG (http://sbfactory.ru/cd/?p=261).
Content Downloader версии 30.63 (09.02.2012):
- Добавлен макрос шаблона вывода WEBASYSTIMG (http://sbfactory.ru/cd/?p=261).
Content Downloader версии 30.56 (08.02.2012):
- Исправлена ошибка, связанная с зависанием программы при использовании функции поиска при задании границ парсинга;
- Несколько доработок и исправлений.
Content Downloader версии 30.49 (08.02.2012):
- Исправлена ошибка, связанная со съеданием символов типа є и ї, которые находились в начале или в конце границы парсинга;
- Исправлена ошибка, связанная с отображением символов І, Ї, Є при задании имен папок для сохраняемых (при парсинге контента) документов;
- Несколько доработок и исправлений.
Content Downloader версии 30.42 (07.02.2012):
- В сканер сайтов добавлена функция поиск-замены для списка очереди и списка найденных ссылок;
- Несколько доработок.
Content Downloader версии 30.35 (06.02.2012):
- Устранена ошибка, связанная с предпросмотром элемента парсинга (также с удалением первой строки из файла и с сохранением документов при парсинге контента)!!!
Content Downloader версии 30.28 MK II (06.02.2012):
- Теперь функция "сохранять загружаемые документы и картинки по разным папкам" корректно работает с символами i, є, ї.
Content Downloader версии 30.28 (06.02.2012):
- Устранены ошибки, связанные с вызовом лога парсинга;
- Значительно доработан сканер сайтов (теперь он ждет завершения потоков, появился счетчик активных потоков и многое другое);
- Множество исправлений и изменений.
Content Downloader версии 30.21 (05.02.2012):
- Устранены ошибки типа "invalid floating point operation" в инструменте задания границ парсинга;
- После выполнения предпросмотра результата парсинга контента или после задания границ парсинга теперь выделяется "правильный" элемент из списка ссылок;
- Несколько доработок и изменений.
Content Downloader версии 30.14 (05.02.2012):
- Теперь сканер сайтов в
Content Downloader EXTENDED поддерживает до 50 потоков;
- Несколько доработок и изменений.
Content Downloader версии 30.07 (04.02.2012):
- В планировщик добавлена опция "запускать сканер сайтов";
- Теперь оповещения об обновлениях отображаются не как модальное окно, а как маленькая панель справа вверху;
- Несколько доработок.
Content Downloader версии 30.03 MK II (04.02.2012):
- В макрос шаблона вывода [GETMORECYCLECONTENT] добавлен параметр SOURCE (http://sbfactory.ru/cd/?p=622).
Content Downloader версии 30.03 (03.02.2012):
- Устранена проблема с символом & при задании границ парсинга;
- Исправлена ошибка с некорректными hint окон в инструменте задания границ парсинга;
- Несколько доработок.
Content Downloader версии 30.00 (31.01.2012):
- Теперь программа имеет три типа лицензии
START: максимум 5 потоков при парсинге контента
STANDARD: максимум 10 потоков при парсинге контента
EXTENDED: максимум 50 потоков при парсинге контента
Все люди, кто покупал программу до 31.01.2012 имеют тип лицензии STANDARD (для них переход на улучшенную версию будет стоить 387 рублей).
Если вы хотите перейти на версию EXTENDED с 50 потоками, то обратитесь в ICQ 571-880-051/Skype smartbyte_support (переход платный, подробности на сайте).
Спасибо!
Content Downloader версии 28.14 (30.01.2012):
- Добавлены опции: "не сохранять документы с битыми картинками", "не сохранять документы без картинок" (Вкладка "контент" - кнопка "дополнительно");
- В редакторе CSV файлов теперь можно загружать по нескольку картинок к каждому товару.
Content Downloader версии 28.07 (26.01.2012):
- ОЧЕНЬ ВАЖНАЯ ДОРАБОТКА!!!: Устранены проблемы с кодировкой при парсинге контента в 1 UTF8 файл!!!
Content Downloader версии 27.91 (22.01.2012):
- Поправлена функция "сохранять загружаемые документы и картинки по разным папкам" (ранее, при включении этой функции, программа могла зависать);
- В шаблон вывода добавлен макрос [GETMORECYCLECONTENT] (получение повторяющихся границ с любого указанного url-адреса);
- Теперь в макросах шаблона вывода GETMORECONTENT и PHP_SCRIPT поддерживается функция поиск-замены;
- Несколько доработок.
Content Downloader версии 27.87 (19.01.2012):
- Исправлен прокси-чекер;
- Доработана функция сохранения проекта;
- Несколько доработок.
Content Downloader версии 27.77 MK VII (18.01.2012):
- Макрос шаблона вывода DOWNLOADFILE теперь поддерживает REPLACE внутри себя;
- Доработан инструмент задания границ парсинга;
- Несколько доработок программного кода.
Content Downloader версии 27.77 MK II (17.01.2012):
- Несколько доработок интерфейса программы;
- Важная доработка кода.
Content Downloader версии 27.77 (17.01.2012):
- Устранены проблемы с интерфейсом программы;
- Во все формы (там где нужно) добавлен хоткей закрытия окна - Esc;
- Несколько доработок.
Content Downloader версии 27.54 (16.01.2012):
- Множество доработок.
Content Downloader версии 27.47 (14.01.2012):
- В "меню" - "файл" добавлены пункты изменения высоты панелей программы для 100%, 125%, 150%, 165% увеличения шрифта и объектов системы;
- Доработан макрос (шаблона вывода) для случайного вывода текста, теперь он обрабатывает сложные конструкции типа {..|{..|..}..|..}.
Content Downloader версии 27.37 MK II (12.01.2012):
- Подправлены макросы шаблона вывода REPLACE;
- Макрос шаблона вывода GETMORECONTENT теперь имеет обработчики макросов REPLACE;
- Несколько доработок.
Content Downloader версии 27.37 (11.01.2012):
- Устранена ошибка "invalid floating point operation" в инструменте для задания границ парсинга;
- Поправлены функции преобразования русского текста в транслит;
- Добавлено несколько пунтов контекстных меню в окно редактора в настройках повторяющихся границ парсинга;
- Множество важных доработок программного кода.
Content Downloader версии 27.12 (09.01.2012):
- Важная доработка программного кода.
Content Downloader версии 27.08 (08.01.2012):
- ВАЖНАЯ ДОРАБОТКА: теперь в инструменте для задания границ парсинга можно менять активную границу (это позволит вам задать сразу несколько границ парсинга не закрывая инструмент);
- В инструмент задания границ парсинга добавлено контекстное меню для окна с кодом документа;
- Теперь в макросе [CATS] к рубрикам можно задать "category nicename" он же "slug" (после ***), например, [CATS]Электроинструмент***electroinstrument///Электродрели***electrodreli[/CATS];
- Доработана функция автопростановки тегов в "обработка и импорт в КМС" - "массовая обработка файлов";
- Несколько доработок и исправлений.
Content Downloader версии 27.07 (03.01.2012):
- ВАЖНОЕ ИСПРАВЛЕНИЕ: устранена ошибка подсветки кода в инструменте для задания границ парсинга;
- В главное меню программы (Меню - Файл) добавлен пункт "создать новый проект с базовыми настройками для CSV";
- Несколько доработок.
Content Downloader версии 27.03 MK II (03.01.2012):
- Значительно доработан поиск по списку ссылок.
Content Downloader версии 27.03 (03.01.2012):
- Реализован поиск по списку ссылок (Ctrl+F);
- Теперь при задании границ парсинга и при предпросмотре парсинга контента в список ссылок (справа) грузится только 7000 первых элементов (это значительно ускоряет работу программы при использовании большого объема ссылок).
Content Downloader версии 27.01 (01.01.2012):
Это Первое обновление 2012 года! От души поздравляю вас с Новогодними праздниками! Желаю счастья, здоровья, любви и благополучия! Успехов вам!
- Проставлен tab order у элементов инструмента для задания границ парсинга;
- Доработано автоопределение расширения файлов в макросе шаблона вывода DOWNLOADFILE;
- Ранее макросом DOWNLOADFILE некоторые большие файлы загружались не полностью, теперь эта ошибка исправлена;
- Несколько доработок.
Content Downloader версии 25.37 (27.12.2011):
- Добавлены хоткеи для задания начала и конца парсинга (в инструменте задания границ);
- Сканер сайтов теперь может собрать до 5 000 000 ссылок (ранее собирал около 1 000 000);
- Макрос шаблона вывода DOWNLOADFILE теперь может определять расширение файла в автоматическом режиме по Content-Disposition;
- Макрос шаблона вывода DOWNLOADFILE теперь может грузить файлы с HTTPS;
- Несколько доработок.
Content Downloader версии 25.37 (27.12.2011):
- Важное исправление программного кода.
Content Downloader версии 25.33 (27.12.2011):
- Устранена проблема с символами "ё" в макросе [PARAM];
- Доработан макрос шаблона вывода STRTOINTID (преобразование текста в числовой ID).
Content Downloader версии 25.27 (27.12.2011):
- Добавлено два новых макроса шаблона вывода: PHP_SCRIPT_3 и PHP_SCRIPT_4 (выполняются практически после всех функций, перед загрузкой картинок);
- Теперь, при закрытии окна сканера сайтов, процесс сбора ссылок не прекращается (идет в фоновом режиме);
- Множество доработок.
Content Downloader версии 25.24 (24.12.2011):
- Неколько доработок.
Content Downloader версии 25.21 (21.12.2011):
- Добавлены функции копирования и очистки столбцов (правый клик по таблице) в редакторе CSV файлов;
- Теперь при генерации списка ссылок по диапазону можно добавлять нули к началу чисел (в которых количество цифр меньше, чем в числе конечного значения диапазона);
- В шаблон вывода добавлен макрос IMORE (вставка тега more);
- Макрос шаблона вывода SHORT теперь выполняется после почти всех функций обработки (но перед макросами REPLACE);
- Добавлен макрос шаблона вывода FIRST_REPLACE (поиск-замена, выполняется почти сразу после вычисления границ парсинга);
- В макрос шаблона вывода DOWNLOADFILENAMES_ (для задания имен сохраняемых файлов с помощью DOWNLOADFILE) теперь можно прописывать не только имя файла, но и папку (например, DOWNLOADFILENAMES_папка1/имя);
- Теперь инструмент "обработка и импорт в КМС" поддерживает unicode (utf-8);
- Множество доработок.
Content Downloader версии 25.18 (18.12.2011):
- В макросе шаблона вывода GETMORECONTENT теперь есть поддержка специального тега {br};
- Исправлена работа макроса шаблона вывода DOWNLOADFILENAMES_;
- Добавлена поддержка редиректов в макрос шаблона вывода DOWNLOADFILE;
- В "Настройка повторяющихся границ" добавлен макрос [VALUE] (который позволяет по нескольку раз выводить значение каждой повторяющейся границы парсинга);
- В макросы шаблона вывода REPLACE (поиск-замена) разделять правила замены теперь можно макросом {break};
- Теперь глобальная функция htm to txt не рвет на строки циклы повторяющихся границ (при сохранении файлов в CSV);
- Несколько доработок.
Content Downloader версии 25.15 (15.12.2011):
- Теперь сайты по https-протоколу можно парсить в 10 потоков;
- В макросы шаблона вывода GETMORECONTENT и PHP_SCRIPT введена поддержка https-протокола;
- Во всех окнах связанных с парсингом программы теперь работает сочетание клавиш Ctrl+A (выделить все);
- Несколько доработок и исправлений.
Content Downloader версии 25.14 (14.12.2011):
- В шаблон вывода добавлен макрос [COUNT] (вставка увеличивающегося числа, стартовое значение которого сбрасывается в каждом документе);
- Несколько доработок.
Content Downloader версии 25.12 (12.12.2011):
- Множество доработок.
Content Downloader версии 24.98 (10.12.2011):
- Устранены ошибки в работе функции слияния двух CSV-файлов в инструменте "редактор CSV файлов".
Content Downloader версии 24.97 (09.12.2011):
- Добавлено несколько макросов шаблона вывода (кнопка "дополнительные макросы шаблона вывода");
- Несколько доработок и исправлений.
Content Downloader версии 24.93 (02.12.2011):
- Теперь лог парсинга (отчет) может не очищаться (опционально, по умолчанию очищается);
- Теперь можно включить/отключить скрипты в предпросмотре парсинга контента;
- Несколько доработок и исправлений.
Content Downloader версии 24.88 (29.11.2011):
- Множество доработок и исправлений.
Content Downloader версии 24.87 (27.11.2011):
- В инструменте задания границ парсинга появилась возможность выбирать другие ссылки из проекта;
- Теперь авторизация методом POST работает и через https;
- Множество изменений, дорабок и исправлений.
Content Downloader версии 24.77 (27.11.2011):
- Теперь в программе можно задать 5 повторяющихся границ парсинга (спасибо Bork75).
Content Downloader версии 24.07 (26.11.2011):
- Теперь можно включить/выключить исполняемые скрипты в браузере окна задания границ парсинга;
- Добавлена поддержка загрузки картинок по https;
- Добавлен макрос шаблона вывода IMAGESPATH (задание папки или пути сохранения изображений);
- В редактор CSV файлов добавлена функция отмены последнего действия.
Content Downloader версии 24.00 (24.11.2011):
- Появилась возможность задавать повторяющиеся границы парсинга используя специальный инструмент (кнопки "SET" рядом с повторяющимися границами);
- Теперь макрос {skip} работает и для повторяющихся границ парсинга.
Content Downloader версии 23.99 (24.11.2011):
- В инструменте предпросмотра результатов парсинга CSV теперь можно просматривать полное содержимое выбранной ячейки;
- В шаблон вывода добавлен макрос DOCSNAMES_ (для задания имен файлов сохраняемых документов).
Content Downloader версии 23.98 (23.11.2011):
- Несколько доработок.
Content Downloader версии 23.97 (22.11.2011):
- Множество доработок.
Content Downloader версии 23.93 (20.11.2011):
- В шаблон вывода добавлен марокс поиск-замены [REPLACE(что заменить|на что заменить)]...[/REPLACE].
Content Downloader версии 23.88 (20.11.2011):
- Добавлена функция вывода указанного текста (или макросов шаблона вывода) в случае, если загружаемый документ окажется пустым (или не загрузится)(на панели инструментов кнопка "задать границы парсинга" - кнопка "условия");
- Теперь в инструменте задания границ парсинга отображается сколько символов было удалено в функции поиск-замены для исходного кода;
- В инструмент задания границ парсинга добавлены кнопки: "показать начало парсинга", "показать конец парсинга";
- Несколько доработок и исправлений.
Content Downloader версии 23.87 (20.11.2011):
- Значения connect/read timeout теперь выставляются и для загрузки изображений, макросов шаблона вывода PHP_SCRIPT и GETMORECONTENT;
- Макрос шаблона вывода SHORT теперь удаляет переносы строк при сохранении в CSV;
- Устранены проблемы со встроенным Web-браузером в инструменте задания границ парсинга;
- Несколько доработок и исправлений.
Content Downloader версии 23.77 (19.11.2011):
- В фильтры ссылок добавлены функции корректировки (удаление параметров, удаление www., удаление / на концах ссылок);
- Добавлена функция поиск-замены для загруженного кода документа при парсинге контента (срабатывает до вычисления границ парсинга);
- Множество доработок и исправлений.
Content Downloader версии 23.18 (18.11.2011):
- Доработан интерфейс и программный код.
Content Downloader версии 23.17 (17.11.2011):
- В функции поиск-замены теперь можно заменять текс на макросы шаблона вывода;
- Добавлена опция connect/read timeout для сканера сайтов, парсинга контента и ссылок (меню - настройка - опции программы)(по умолчанию 30000 мс (30 секунд));
- Несколько доработок.
Content Downloader версии 23.11 (11.11.2011):
- Добавлен макрос шаблона вывода STRTOINTID (преобразование любого текста в числовой ID);
- Добавлена функция сортировки списка ссылок по алфавиту (правый клик по списку);
- Несколько доработок, изменений и исправлений.
Content Downloader версии 22.37 (03.11.2011):
- У макросов шаблона вывода PHP_SCRIPT и GETMORECONTENT добавлены опции: использовать в 1 поток/многопоточно (смотрите меню - настройка функций программы и макросов шаблона вывода - настройка макросов);
- Несколько улучшений.
Content Downloader версии 22.33 (01.11.2011):
- Значительно ускорена функция удаления дублей ссылок (правый клик по списку ссылок (в главном окне программы) - "удалить дубли");
- Макрос шаблона вывода GETMORECONTENT теперь работает в несколько потоков (ранее, при выполнении этого макроса, остальные потоки "ожидали");
- Несколько доработок.
Content Downloader версии 22.31 (31.10.2011):
- Добавлена опция включения/отключения макроса случайного вывода текста ({..|..|..|..});
- Множество доработок, исправлений и изменений.
Content Downloader версии 22.25 (25.10.2011):
- Доработан макрос шаблона вывода TOPRICE (теперь можно указать множитель цены);
- Исправлена функция слияния двух CSV в редакторе CSV файлов;
- В парсер Google картинок добавлена опция отключения фильтрации;
- Несколько исправлений и изменений.
Content Downloader версии 22.22 (22.10.2011):
- Теперь cookies сохраняются в файлы проектов (вкладка "контент" - кнопка "дополнительно" - "cookies");
- Файлы проектов теперь сохраняются в кодировке utf-8;
- Несколько доработок.
Content Downloader версии 22.12 (20.10.2011):
- Доработан макрос шаблона вывода GETMORECONTENT;
- В шаблон вывода добавлен макрос ONELINE (преобразование выбранного текста в одну строку);
- Несколько доработок.
Content Downloader версии 22.07 (20.10.2011):
- Доработан макрос шаблона вывода FILE (смотрите настройки макроса);
- В шаблон вывода добавлен макрос IMAGESNAMES_ (пропишите после IMAGESNAMES_ любой текст (или вставьте после IMAGESNAMES_ любой макрос) для задания имен файлов картинок(необходимо в "Дополнительные параметры загрузки изображений" включить "брать имена файлов из границы парсинга 1/параметра IMAGESNAMES_));
- Несколько доработок.
Content Downloader версии 22.00 (11.10.2011):
- Введена поддержка HTTPS протокола (только 1 поток!);
- В шаблон вывода добавлен макрос PHP_SCRIPT_2 (сначала выполняется PHP_SCRIPT, а затем PHP_SCRIPT_2);
- В шаблон вывода добавлен макрос [SYN] (синонимизация);
- Несколько доработок.
Content Downloader версии 21.07 (09.10.2011):
- В шаблон вывода добавлен макрос [COMMENT] (импорт комментариев в WordPress);
- В шаблон вывода добавлен макрос [POSTMETA] (импорт произвольных полей в WordPress);
- Несколько доработок.
Content Downloader версии 20.97 (08.10.2011):
- Добавлен предпросмотр парсинга элемента в виде таблицы CSV (с указанием любого разделителя ячеек);
- Несколько доработок и исправлений.
Content Downloader версии 20.87 (05.10.2011):
- В шаблон вывода добавлен макрос [INT_ID] (вставка увеличивающегося числового ID);
- В шаблон вывода добавлен макрос [CATS] (для импорта рубрик и подрубрик в WordPress);
- Несколько доработок программного кода и интерфейса.
Content Downloader версии 20.12 (18.09.2011):
- В редактор CSV файлов добавлены новые функции;
- Несколько доработок и исправлений.
Content Downloader версии 20.00 (12.09.2011):
- В программу добавлен редактор CSV файлов (смотрите на панели инструментов).
Content Downloader версии 19.09 (08.09.2011):
- Несколько доработок.
Content Downloader версии 19.08 (29.07.2011):
- Значительно доработан макрос SHORT (http://sbfactory.ru/cd/?p=261).
Content Downloader версии 19.07 (28.07.2011):
- В шаблон вывода добавлены макросы [DELTAGS:][/DELTAGS] и [HTMTOTXT:][/HTMTOTXT] (http://sbfactory.ru/cd/?p=261);
- Несколько доработок.
Content Downloader версии 19.00 (24.07.2011):
- В функции поиск-замены теперь можно прописывать переход на новую строку {br};
- Несколько доработок.
Content Downloader версии 18.99 (22.07.2011):
- В функциях поиск замены теперь можно использовать макросы {|||} (для рандомной вставки слова);
- Если в макросе GETMORECONTENT не задать параметры START или END, то будет загружен весь документ;
- Множество доработок.
Content Downloader версии 18.98 (16.07.2011):
- Налажен импорт в WP версии 3 и выше.
Content Downloader версии 18.97 (14.07.2011):
- В функцию поиск-замены добавлен макрос {skip};
- Теперь можно созжавать файлы импорта для Wordpress версии 3 и выше.
Content Downloader версии 18.93 (04.07.2011):
- Добавлены горячие клавиши загрузки и сохранения проектов;
- Несколько доработок.
Content Downloader версии 18.89 (26.06.2011):
- Несколько незначительных доработок.
Content Downloader версии 18.88 (24.06.2011):
- В макрос GETMORECONTENT добавлен параметр tocsv;
- Доработана функция автоопределения заголовка.
Content Downloader версии 18.87 (24.06.2011):
- В шаблон вывода добавлен макрос GETMORECONTENT.
Content Downloader версии 18.37 (21.06.2011):
- Предпросмотр ссылок производится теперь не в блокноте, а в специальном окне программы;
- Добавлена функция авторизации через браузер (просто вводите логин и пароль в браузере программы (кнопка "авторизация") и жмете "передать cookies из webbrowser").
Content Downloader версии 18.33 (16.06.2011):
- Добавлена поддержка регулярных выражений в функцию поиск-замены.
Content Downloader версии 18.25 (05.06.2011):
- Доработан макрос GETGOOGLEIMAGE (теперь, при неоднократном вызове в одном документе, парсятся разные картинки).
Content Downloader версии 18.23 (26.05.2011):
- Введена поддержка парсинга jpgx изображений;
- В парсере Google картинок теперь есть пауза между запросами (770 мс);
- Настройка парсера под новый формат выдачи Google картинок.
Content Downloader версии 18.21 (20.05.2011):
- Доработан макрос GETGOOGLEIMAGE.
Content Downloader версии 18.19 (19.05.2011):
- В шаблон вывода добавлен макрос парсинга изображений из Google (GETGOOGLEIMAGE)(http://sbfactory.ru/cd/?p=307);
- Множество доработок.
Content Downloader версии 18.12 (16.05.2011):
- Важные доработки для парсинга Google;
- Несколько изменений.
Content Downloader версии 18.07 (12.05.2011):
- В шаблон вывода добавлен макрос для создания краткого описания путем обрезания полного ();
- Появилась возможность использовать * в качестве регулярных выражений (в фильтрах ссылок);
- Несколько доработок.
Content Downloader версии 18.01 (11.05.2011):
- Появилась возможность использовать * в качестве регулярных выражений (в функции фильтрации документов по списку ключевиков);
- Несколько доработок.
Content Downloader версии 18.00 (08.05.2011):
- Теперь можно использовать макрос {skip} в 20 границах парсинга;
- Исправлена работа макроса DOWNLOADFILE;
- Макрос PHP_SCRIPT теперь поддерживает user agent и авторизацию;
- В инструмент задания границ парсинга в правый верхний угол добавлена кнопка для открытия "дополнительные настройки границ парсинга" с нужной активной вкладкой;
- Несколько доработок и исправлений.
Content Downloader версии 17.91 (01.05.2011):
- В парсере Google картинок появилась возможность задавать точный размер изображений;
- DOWNLOADFILE теперь поддерживает авторизацию (вкладка "контент", кнопка "авторизация");
- DOWNLOADFILE теперь отправляет referer (при загрузке);
- Переделана функция обновления программы;
- Множество доработок и исправлений.
Content Downloader версии 17.89 (29.04.2011):
- В "дополнительные настройки границ парсинга" к каждой границе добавлена своя функция поиск-замены;
- Несколько доработок.
Content Downloader версии 17.87 (27.04.2011):
- В шаблон вывода добавлен макрос TOPRICE (преобразование в формат цены для CSV: замена всех точек на запятые, удаление всех символов, кроме цифр);
- Несколько доработок.
Content Downloader версии 17.79 (26.04.2011):
- В шаблон вывода добавлен макрос SHAKESTRINGS (перемешивание строк);
- В "дополнительные настройки границ парсинга" добавлены функции перемешивания строк (перемешивать строки).
Content Downloader версии 17.77 (25.04.2011):
- Несколько доработок и исправлений;
- Добавлен планировщик.
Content Downloader версии 17.19 (19.04.2011):
- Несколько доработок.
Content Downloader версии 17.18 (18.04.2011):
- Несколько доработок;
- Теперь загружаются изображения с кириллицей в путях.
Content Downloader версии 17.17 (08.04.2011):
- Улучшена работа программы со списком прокси (теперь на загрузку 1 элемента выделяется 10 попыток со сменой proxy);
- Добавлена функция автоматической смены user agent при парсинге контента и сканировании сайта.
Content Downloader версии 17.12 (03.04.2011):
- Макрос DOWNLOADFILE теперь загружает файлы и по относительным ссылкам;
- Время ожидание ответа сервера в макросе DOWNLOADFILE теперь равно 30000 мс;
- Исправлена ошибка с одинаковыми расширениями в DOWNLOADFILE.
Content Downloader версии 17.11 (01.04.2011):
- Значительно доработаны дополнительные настройки границ парсинга (добавлены функции преобразования в транслит и многое другое).
Content Downloader версии 17.00 (31.03.2011):
- В шаблоне вывода реализована функция удаления неиспользуемых макросов границ парсинга (правый клик по окну);
- Несколько доработок;
- Доработана функция фильтрации документов по списку ключевых слов.
Content Downloader версии 15.99 (29.03.2011):
- Шаблон вывода теперь поддерживает конструкции типа {апельсин|мандарин|оранжевый фрукт} (применяется для дополнительной уникализации контента при парсинге);
- В шаблон вывода добавлена панель инструментов с html тегами;
- Несколько изменений.
Content Downloader версии 15.98 (28.03.2011):
- Несколько доработок;
- В лог парсинга добавлена функция копирования в буфер url-адресов тех документов, которые не удалось загрузить (правый клик по списку);
- Теперь окно редактирования шаблона вывода разворачивается на весь экран;
- Теперь, при клике по шапке (в шаблоне вывода), подсвечивается соответствующий "столбец" (CSV) в тексте шаблона вывода.
Content Downloader версии 15.97 (26.03.2011):
- В инструмент редактирования списка ссылок добавлена функция удаления указанных параметров ссылок;
- Теперь появилась возможность автоматически запускать парсинг (через указанный временной интервал) после приостановки (в случае бана);
- Реализован лог парсинга (меню - сервис - смотреть лог парсинга (отчет)).
Content Downloader версии 15.93 (24.03.2011):
- Теперь в сканере сайтов обарбатываются ссылки в url кодировке (ранее были проблемы);
- Теперь можно указать по сколько документов сохранять в один файл (при сохранении в один файл);
- Теперь можно парсить документы с локального диска;
- Реализована функция добавления документов с диска в список парсинга;
- Несколько доработок.
Content Downloader версии 15.87 (15.03.2011):
- Теперь к каждой найденной ссылке (в сканере сайтов) будет подставлен "http://";
- Важная доработка программы (ПОТРЕБУЕТСЯ ПЕРЕАКТИВАЦИЯ!!!).
Content Downloader версии 15.78 (04.03.2011):
- Теперь пустые файлы картинок удаляются при парсинге;
- Доработана функция фильтрации документов по списку ключевых слов (теперь появилась возможность выбора: сохранять документ, граница которого содержит один из ключевиков, или сохранять документ, граница которого не содержит ни одного из ключевиков);
Content Downloader версии 15.77 (01.03.2011):
- В шаблон вывода добавлен макрос DOWNLOADFILE (он позволяет парсить файлы).
Content Downloader версии 15.58 (24.02.2011):
- В сканере сайтов появилась возможность задавать диапазон глубины ссылок для списка очереди;
- В фильтры ссылок добавлена функция фильтрации по длине;
- Ранее сканер сайтов мог уходить на другие web-ресурсы, теперь это исправлено;
Content Downloader версии 15.57 (22.02.2011):
- В расширенную функцию добавления файлов внедрена возможность выделения случайных файлов;
- Теперь (при закрытии программы) удаляется кеш предпросмотра парсинга контента (папка preview_files);
- В сканер сайтов добавлен счетчик обработанных ссылок очереди (это ссылки, которые были обработаны сканером);
- В сканер сайтов добавлены функции: "сделать бекап", "восстановить". Эти функции позволяют записать список найденных ссылок, список очереди ссылок и список обработанных ссылок на диск, а затем загрузить их в любое время (даже после перезапуска программы) и продолжить сканирование сайта;
- Теперь (при редактировании фильтров ссылок) чекбоксы фильтров включаются автоматически.
Content Downloader версии 15.55 (20.02.2011):
- Значительно доработаны и расширены фильтры ссылок (сидел нереально долго);
- Оптимизирована функция применения фильтров ссылок к списку парсинга (правый клик по списку ссылок);
- Добавлен индикатор прогресса для функции применения фильтров ссылок к списку парсинга;
- Теперь, если длина документа окажется меньше минимальной указанной, картинки не скачиваются (ранее картинки скачивались);
- Добавлена функция фильтрации контента согласно заданному списку ключевых выражений (при парсинге);
- Если нажать паузу или закрыть окно при выполнении предпросмотра парсинга контента, процесс загрузки картинок будет остановлен (ранее происходило ожидание загрузки документа);
- Важная доработка программного кода;
- Теперь кнопка "начать парсинг" становится активной по истечении 33 секунд (в случае зависания одного из потоков);
- Устранено кратковременное подвисание (0.3-0.7 секунд) при запуске парсинга контента.
Content Downloader версии 15.00 (18.02.2011):
- Теперь функция поиск-замены (при парсинге контента) может применяться как ко вем, так и только к указанным границам парсинга;
- Теперь можно подписать каждую границу парсинга (присвоить ей имя в окне задания границ парсинга);
- В функцию авторизации теперь можно вводить данные в url кодировке (в этой кодировке много знаков процентов);
- Улучшена функция генерации ссылок по шаблону (теперь можно генерировать в два макроса);
- Добавлена функция "приостановить парсинг в случае бана";
- Несколько незначительных доработок и исправлений.
Content Downloader версии 14.12 (15.02.2011):
- Несколько доработок и исправлений.
Content Downloader версии 14.09 (11.02.2011):
- В дополнительных настройках границ парсинга появилась возможность задавать текст, который будет подставляться в начало и в конец указанной границы парсинга (если эта граница окажется пустой, то текст не добавится).
Content Downloader версии 14.07 (09.02.2011):
- В программе появилась возможность брать имена файлов сохраняемых картинок из первой границы парсинга;
- Теперь программа поддерживает url-адреса с русскими буквами.
Content Downloader версии 14.03 (06.02.2011):
- Несколько доработок и исправлений.
Content Downloader версии 14.01 (26.01.2011):
- Теперь в WP импортируется описание;
- При отправке текста скрипту (макрос PHP_SCRIPT) все & заменяются на %26;
- Несколько незначительных доработок и исправлений.
Content Downloader версии 14.00 (23.01.2011):
- Расширены допонительные настройки границ парсинга;
- Теперь при переходе во вкладку с границами парсинга нижняя панель скрывается.
Content Downloader версии 12.99 (20.01.2011):
- В шаблон вывода добавлен макрос PHP_SCRIPT (для обработки контента на сервере).
Content Downloader версии 12.98 (17.01.2011):
- Теперь обрабатываются ссылки, содержащие знак ' в адресе;
- В "дополнительные настройки границ парсинга" добавлены чекбоксы "обязательна" для 6 границ парсинга.
Content Downloader версии 12.97 (12.01.2011):
- В парсер Google картинок теперь можно вводить несколько запросов одновременно;
- Несколько других изменений и доработок.
Content Downloader версии 12.93 (06.01.2011):
- Большое количество исправлений и доработок (теперь можно без проблем парсить otvet.mail.ru).
Внимание: после этого обновления потребуется повторная активация программы (перед обновлением проверьте наличие ключа).
Content Downloader версии 12.87 (04.01.2011):
- Количество границ парсинга увеличено до 20;
- Настройки функции htm to txt теперь сохраняются в файл проекта;
- Несколько доработок и изменений.
Content Downloader версии 12.37 (03.01.2011):
- Теперь с помощью поиск-замены (при парсинге) можно удалять символы, для этого оставьте пустым параметр "на что заменить";
- Добавлена возможность сохранения в документах имен файлов картинок без их адресов, например: january.jpg;
- Теперь можно задать "шапку" к CSV файлам в шаблоне вывода.
Content Downloader версии 12.33 (02.01.2011):
- Введена поддержка загрузки изображений, генерируемых php скриптом. Для включения опции зайдите в "дополнительные параметры загрузки изображений" и включите галочку "загружать изображения, генерируемые php скриптом" (Яндекс Маркет, держись).
Content Downloader версии 12.29 (29.12.2010):
- Добавлена функция поиск-замены символов при парсинге контента;
- Теперь можно указывать количество строк, которые будут браться из подключаемых файлов при парсинге;
- Добавлена функция автокорректировка регистра символов заголовка;
- Некоторое количество незначительных исправлений, изменений и доработок.
Content Downloader версии 12.15 (26.12.2010):
- Добавлена функция сохранения ссылок загружаемых страниц (при последующем парсинге того же сайта, загруженные ранее страницы не будут парситься);
- Доработан генератор html/php сайтов;
- Если поле "описание" пустое, то при создании файла импорта в Zebrum больше не добавляется строка "@@description=";
- При автозаполнении полей ковычки " и ' удаляются из текстов описаний и заголовков;
- Теперь конвертируется в одну строку каждый цикл макроса CD_CYCLE_GRAN_ALL! по отдельности (при сохранении в csv);
- Несколько незначительных доработок и изменений.
Content Downloader версии 12.12 (22.12.2010):
- Добавлена поддержка списка proxy при парсинге контента и при сканировании сайта (меню - управление proxy - список proxy).
Content Downloader версии 12.00 (21.12.2010):
- ОБНОВЛЕНИЕ СИСТЕМЫ ЗАЩИТЫ! Если возникнут проблемы с использованием программы, обращайтесь в службу поддержки;
- Теперь можно указывать свой User Agent (вкладка "контент" - кнопка "дополнительно");
- Теперь работает ctrl+c в полях главного окна;
- Несколько незначительных изменений.
Content Downloader версии 11.47 (20.12.2010):
- Доработан предпросмотр парсинга контента: теперь отображается список всех загруженных картинок, в окне можно будет выбирать другой элемент для предпросмотра (двойной клик по списку ссылок);
- Теперь программа обрезает в ссылках все символы, стоящие после # (и саму решетку);
Content Downloader версии 11.41 (14.12.2010):
- Добавлена функция синонимизации контента при парсинге (вкладка "контент" - кнопка "дополнительно").
Content Downloader версии 11.39 (30.11.2010):
- В массовую обработку файлов (вкладка "чистка документов 2") добавлена функция удаления строк по их минимальной или максимальной длине.
Content Downloader версии 11.37 (23.11.2010):
- В шаблон вывода добавлен макрос NIMG: позволяет загружать картинки по ссылке (без тега img). При сохранении документа, макрос NIMG удаляется из текста.
- User агент, отсылаемый при http запросах, сменен с MSIE 6.0 на MSIE 8.0;
- Все пробелы в путях изображений (в коде документов) заменяются на символ: %20 (при парсинге контента);
- Теперь в парсере Google картинок появилась возможность копировать полученный список ссылок в буфер обмена системы.
Content Downloader версии 11.34 (21.11.2010):
- Исправлен сканер сайтов;
- В массовую обработку файлов добавлена функция добавления текста (дилерского id) ко всем ссылкам проекта (вкладка - работа с гиперссылками).
Content Downloader версии 11.27 (20.11.2010):
- Доработан парсер Google картинок;
- При сохранении контента в формат csv, границы без символов перехода на новую строку больше не берутся в теги p;
- Несколько незначительных доработок.
Content Downloader версии 11.23 (17.11.2010):
- При парсинге ссылок все "&" заменяются на "&" (спасибо Pioneru);
- Доработан сканер сайтов;
- В массовую обработку файлов (вкладка автопростановка тегов) добавлена функция вставки указанного тега после определенного (тега);
- Несколько изменений и доработок.
Content Downloader версии 11.17 (16.11.2010):
- Теперь границы заголовка работают с {br} (ранее были проблемы);
- Переработана система активации.
Content Downloader версии 11.12 (16.11.2010):
- Исправлен баг с границами парсинга (ранее при задании начала парсинга с символами перехода на новую строку номер тега высчитывался некорректно).
Content Downloader версии 11.11 (16.11.2010):
- Теперь в текст каждой границы парсинга могут входить символы перехода на новую строку (еле сделал);
- В инструмент массового ресайза изображений добавлена функция отражения рисунка по горизонтали.
Content Downloader версии 11.01 (15.11.2010):
- Теперь отображается тег more при предпросмотре в браузере (обработка и импорт в КМС) (Спасибо Krumm);
- В функцию htm to txt добавлено около 20 спец-символов (спасибо Nexer);
- Реализован ctrl+a в окне управления изображениями проекта;
- Парсер Google картинок теперь может добавлять изображения в проект при парсинге.
Content Downloader версии 11.00 (14.11.2010):
- Доработана функция предпросмотра результата парсинга контента (спасибо XperT);
- В редактор списка ссылок (правый клик по списку - "редактировать список") добавлены функции обрезания;
- В программу добавлен парсер Google картинок;
- Несколько незначительных доработок и изменений.
Content Downloader версии 10.89 (12.11.2010):
- В массовую обработку добавлены функции получения ссылок из документов проекта и замены указанных ссылок в документах проекта на свои url;
- Несколько доработок.
Content Downloader версии 10.87 (12.11.2010):
- Исправлена ошибка съедания памяти при парсинге контента в один файл (спасибо SeWork за наводку).
Content Downloader версии 10.51 (11.11.2010):
- В браузер (при задании границ парсинга) добавлен onclick эвент;
- Добавлены дополнительные настройки границ парсинга;
- Несколько незначительных изменений и доработок.
Content Downloader версии 10.40 (10.11.2010):
- Теперь можно изменить размер окна массовой обработки (+ несколько приятных изменений);
- Теперь, при выводе в csv, ";" из настроек повторяющихся границ парсинга не заменяется (не удаляется).
Content Downloader версии 10.38 (09.11.2010):
- Исправлены границы парсинга 6 (ранее номер тега этих границ не учитывался);
- Несколько изменений и доработок.
Content Downloader версии 10.37 (09.11.2010):
- Доработана функция преобразования контента в одну строку (необходимо для вывода в csv): улучшен алгоритм и добавлены опции.
Content Downloader версии 10.33 (08.11.2010):
- В массовую обработку файлов добавлена функция автопростановки тегов p (вкладка "автопростановка тегов");
- В "задать границы парсинга" добавлена опция - "не сохранять при отсутствии одной из границ";
- Доработан инструмент полуавтоматического парсинга;
- В контекстное меню списка ссылок добавлена функция - "скопировать выделенную ссылку в буфер";
- Выполнено обновление среды разработки (надеюсь, проблем не возникнет);
- Несколько незначительных изменений.
Content Downloader версии 10.30 (07.11.2010):
- Теперь можно использовать границы парсинга n для повторяющихся границ;
- Исправлен баг с нахождением повторяющихся границ парсинга.
Content Downloader версии 10.10 (07.11.2010):
- Добавлены еще четыре границы парсинга.
Content Downloader версии 10.03 (06.11.2010):
- Реализована поддержка макросов из шаблона вывода в настройке повторяющихся границ парсинга.
Content Downloader версии 10.01 (05.11.2010):
- Теперь можно задать разделитель для повторяющихся границ парсинга (кнопка - "настройка повторяющихся границ").
Content Downloader версии 10.00 - юбилейный выпуск (05.11.2010):
- Добавлена еще одна повторяющаяся граница;
- В шаблон вывода добавлен макрос CD_CYCLE_GRAN_ALL!: поочередный вывод данных из всех повторяющихся границ;
- Несколько изменений, исправлений и доработок.
Content Downloader версии 9.99 (04.11.2010):
- Исправлена ошибка, связанная с закрытием программы при предпросмотре элемента (парсинг контента).
Content Downloader версии 9.98 (04.11.2010):
- Доработан сканер сайтов: ранее не обрабатывались некоторые ссылки;
- Доработана функция создания файлов импорта в WordPress: теперь можно задавать дату начала отложенной публикации (извиняюсь, что так долго реализовывал).
Content Downloader версии 9.97 (03.11.2010):
- Устранен баг с зависанием программы при предпросмотре html элемента (парсинг контента).
Content Downloader версии 9.93 (03.11.2010):
- Попытка устранить ошибку "Thread creation error: Недостаточно памяти для обработки команды" при парсинге.
Content Downloader версии 9.91 (03.11.2010):
- Доработан сканер ссылок (+обработка ссылок .asp);
- Доработана функция задания границ парсинга (устранены ошибки с загрузкой документов).
Content Downloader версии 9.89 (03.11.2010):
- При задании границ парсинга, программа больше не ругается на то, что начало парсинга стоит после конца парсинга (и наоборот);
- В создание файла импорта по шаблону и в инструмент генерации сайтов добавлен макрос "FILE" (вставка строки из указанного файла);
- Изменен интерфейс массовой обработки файлов;
- В массовую обработку файлов добавлена функция удаления указанного тега из документов проекта;
- В массовую обработку файлов добавлена функция добавления атрибута к указанному тегу;
- В массовую обработку файлов добавлена функция удаления переносов строк в тегах.
Content Downloader версии 9.88 (01.11.2010):
- Реализован multiselect в дереве с документами (обработка и импорт в КМС).
Content Downloader версии 9.87 (29.10.2010):
- В шаблон вывода и в настройку повторяющихся границ парсинга добавлен макрос "FILE" (вставка строки из указанного файла);
- В предпросмотре результата парсинга контента теперь выполняются скрипты и запускаются объекты.
Content Downloader версии 9.58 (28.10.2010):
- Доработан вывод в csv (теперь ";" заменяется только в границах (не в шаблоне), заменяется на "-").
Content Downloader версии 9.57 (28.10.2010):
- Теперь, при сохранении документов в csv расширении, все ";" в тексте заменяются на ".";
- В массовой обработке файлов появилась возможность удалять все атрибуты тегов img, кроме src;
- Переработан импорт в WordPress (теперь slug к рубрикам прописывается транслитом, метки не дублируются);
- Доработана функция генерации статических сайтов (появилась возможность выбора кодировки и языка сайта);
- Несколько незначительных доработок и исправлений.
Content Downloader версии 9.53 (27.10.2010):
- Теперь программа работает с тегами, содержимое которых разрывается переходом(ами) на новую строку;
- Увеличена высота окна управления в инструменте полуавтоматического парсинга.
Content Downloader версии 9.51 (27.10.2010):
- В массовую обработку файлов, вкладка "чистка документов 2", добавлена функция удаления тегов изображений, которых нет на диске.
Content Downloader версии 9.50 (26.10.2010):
- Добавлен инструмент полуавтоматического парсинга контента.
Content Downloader версии 9.47 (25.10.2010):
- Добавлена функция парсинга картинок (документы при этом не сохраняются, а картинки загружаются в папку для сохранения документов).
Content Downloader версии 9.45 (25.10.2010):
- Добавлена возможность сохранения контента (картинок и статей) по разным папкам (по рубрикам). Имена папок берутся из первых строк файлов (первые строки будут удаляться). Для активации функции включите флажок с текстом "<>" возле поля с путем сохранения (вкладка контент - другое).
Content Downloader версии 9.37 (25.10.2010):
- Функция "htm to txt" теперь удаляет следующие атрибуты тегов: style, class, id.
Content Downloader версии 9.33 (24.10.2010):
- В шаблон вывода добавлен макрос CD_DOCURL! (вставка url-адреса загружаемого документа);
- Теперь в инструменте авторизации используется одна textarea для отправки данных (построчный ввод параметров).
Content Downloader версии 9.27 (23.10.2010):
- Устранены проблемы в работе программы со ссылками, содержащими в себе следующие символы: "%20", " ", "&039;", "&034;".
Content Downloader версии 9.23 (23.10.2010):
- Исправлена ошибка со съезжающим цветовым выделением при открытии окна задания границ парсинга.
- Теперь, при автозаполении полей, можно брать метки и описания из указанной строки;
- Доработана система обработки ссылок (ранее возникали проблемы со ссылками, содержащими в себе пробелы).
Content Downloader версии 9.21 (19.10.2010):
- Добавлена функция отмены последнего действия над списком ссылок;
- В массовой обработке файлов теперь сохраняются настройки;
- Несколько незначительных изменений и доработок.
Content Downloader версии 9.17 (17.10.2010):
- Доработана функция автопростановки тегов.
Content Downloader версии 9.11 (16.10.2010):
- Множество исправлений, изменений и доработок.
Content Downloader версии 9.01 (14.10.2010):
- Переход на абсолютные пути к картинкам при работе с контентом;
- Добавлена функция конвертирования текста каждой границы в Excel формат;
- Множество незначительных исправлений, изменений и доработок.
Content Downloader версии 9.00 (13.10.2010):
- Исправлен баг с зависанием программы при парсинге контента.
Content Downloader версии 8.99 (13.10.2010):
- Исправлен баг при сохранении документов с использованием опции "в имена файлов".
Content Downloader версии 8.98 (13.10.2010):
- Доработана система завершения потоков при парсинге контента (ранее иногда кнопки старта оставались неактивными после завершения парсинга);
- В шаблон вывода добавлен макрос CD_AUTO! (автоматическое нахождение текста статьи в коде загружаемого web-документа);
- Слегка доработана функция автоматического нахождения статьи;
- Пара незначительных исправлений и доработок.
Content Downloader версии 8.97 (12.10.2010):
- Слегка доработана функция автоматического нахождения статьи;
- Доработана функция создания файла импорта в Zebrum (опциональное добавление nosplit, вывод keywords, description);
- Пара незначительных исправлений и доработок.
Content Downloader версии 8.93 (12.10.2010):
- Добавлены функции ожидания закрытия тегов (задание границ парсинга);
- Несколько незначительных исправлений и доработок.
Content Downloader версии 8.88 (10.10.2010):
- Устранен баг, связанный с предпросмотром парсинга контента;
- Доработана функция автоматического нахождения текста статьи в html документе.
Content Downloader версии 8.87 (10.10.2010):
- Появилась возможность использовать заголовки в именах файлов (наконец-то);
- Теперь строки из каждого цикла в повторяющихся границах можно окаймлять любым текстом;
- Появилась возможность задавать любой преффикс к относительным путям изображений;
- Добавлена функция автоматического определения кодировки загружаемого элемента (работает с Windows (default) и utf-8 кодировками);
- Теперь можно указать кодировку сохраняемого документа (default, utf-8);
- Исправлен и доработан алгоритм поиска ссылок в сканере сайтов;
- Исправлен сканер сайтов (иногда, при запуске сканера, ничего не происходило);
- Множество незначительных исправлений, изменений и доработок.
Content Downloader версии 8.00 (08.10.2010):
- Доработан инструмент добавления ссылок через браузер (добавлена поддержка вкладок и многое другое);
- Исправлен и доработан алгоритм поиска ссылок в сканере сайтов;
- Добавлено звуковое оповещение завершения процесса парсинга контента;
- Доработана функция автонахождения статьи;
- Теперь отображается процесс выполнения предпросмотра элемента (при парсинге контента);
- Множество незначительных исправлений, изменений и доработок.
Content Downloader версии 7.93 (05.10.2010):
- Значительно доработана функция автоматического нахождения статьи в коде загружаемого документа;
- Пара незначительных доработок.
Content Downloader версии 7.87 (04.10.2010):
- Слегка доработана функция автоматического нахождения статьи в коде загружаемого документа;
- Добавлена функция автоматического нахождения заголовка в коде загружаемого документа.
Content Downloader версии 7.78 (04.10.2010):
- Слегка доработана функция автоматического нахождения статьи в коде загружаемого документа;
- Пара незначительных доработок.
Content Downloader версии 7.77 (03.10.2010):
- Добавлена функция автоматического нахождения статьи в коде загружаемого документа.
Content Downloader версии 7.14 (03.10.2010):
- Испраслена ошибка при задании нескольких шаблонов ссылок в фильтрах сканера сайтов;
- При приостановке работы сканера сайтов списки выдач больше не пополняются от заверщающихся потоков;
- Добавлены функции копирования в буфер выдачи и очереди ссылок в сканере сайтов (правый клик по окну со ссылками).
Content Downloader версии 7.12 (03.10.2010):
- Сканер сайтов теперь можно свернуть, чтобы он продолжал работу в фоновом режиме (кнопка "свернуть");
- Доработана функция автопростановки кейвордов в массовой обработке файлов (теперь кейворды можно брать из заголовка статьи + пара новых опций).
Content Downloader версии 7.10 (02.10.2010):
- Значительно улучшена расширенная функция добавления файлов (добавлено выделение указанного диапазона, добавлена функция "добавление документов с автоматическим присвоением рубрик");
- Теперь в программу добавляются файлы и изображения с точкой в середине имени файла;
- Исправлен баг со "съезжающими" границами парсинга (при задании границ парсинга от самого начала документа).
Content Downloader версии 7.00 (01.10.2010):
- Добавлена функция массовой загрузки файлов (с интернета, по списку);
- Добавлен многопоточный сканер сайтов (Super!);
- Множество незначительных изменений, исправлений и доработок.
Content Downloader версии 6.99 (28.09.2010):
- Исправлен баг, связанный с опцией "парсить с границами";
- Количество границ парсинга увеличено до 14;
- Добавлена функция поиска при предпросмотре кода в парсинге контента;
- Слегка доработана функция поиска в окне обработке и импорта в КМС;
- Множество незначительных изменений, исправлений и доработок.
Content Downloader версии 6.97 (27.09.2010):
- Добавлены обработчики ошибок в окне задания границ парсинга и в окне предпросмотра элемента при парсинге контента;
- Несколько незначительных исправлений и доработок.
Content Downloader версии 6.94 (26.09.2010):
- Доработан инструмент добавления ссылок через браузер;
- При сохранении в csv формат, текст каждого макроса теперь автоматически конвертируется в одострочный;
- При сохранении в csv формат, все ";" в тексте каждого макроса заменяются на ".".
Content Downloader версии 6.93 (25.09.2010):
- Добавлена функция преобразования загружаемого контента в одну строку (с заменой невидимых символов переноса строк на тег br);
- В окне предпросмотра парсинга контента теперь подсвечиваются html теги;
- Доработана "расширенная функция добавления файлов" (если ни один документ не выделен, то добавятся все файлы + несколько незначительных доработок, исправлений и изменений);
- Теперь, при импорте в Wordpress, всем опубликованным записям присваивается статус publish;
- Множество незначительных нововведений, изменений, исправлений и доработок.
Content Downloader версии 6.91 (25.09.2010):
- Доработана функция рассчета дат в отложенной публикации (теперь даты публикаций статей присваеваются к списку документов не по очереди, а в случайном порядке).
Content Downloader версии 6.89 (25.09.2010):
- Теперь, при парсинге контента, папки с изображениями создаются только к тем документам, где содержатся картинки;
- Теперь количество меток (автозаполнение полей) не фиксированное, а рандомное;
- Исправлены и доработаны функции расстановки дат публикации (при создании файлов импорта в Wordpress, Zebrum);
- Теперь парсятся картинки с пробелами и знаком % в имени файла;
- Множество незначительных нововведений, изменений, исправлений и доработок.
Content Downloader версии 6.87 (23.09.2010):
- Исправлен и доработан инструмент задания границ парсинга;
- Слегка изменен интерфейс вкладки контент;
- Множество незначительных изменений, исправлений и улучшений (только парсинг).
Content Downloader версии 6.18 (22.09.2010):
- Исправлена ошибка, связанная с границами парсинга (ранее прии задании 3,4,5,6,7 или 8 границ парсинга без задания границ 1 и 2 контент не сохранялся).
Content Downloader версии 6.17 (22.09.2010):
- Исправлен баг с границами парсинга (иногда в файл вывода попадали даже отключенные границы);
- Переработан инструмент задания границ парсинга;
- Множество незначительных изменений, исправлений и улучшений.
Content Downloader версии 6.00 (18.09.2010):
- Количество границ парсинга увеличено до 10;
- Появилась возможность сохранять спарсенные документы по заданному шаблону;
- Множество незначительных изменений, исправлений и улучшений.
Content Downloader версии 5.18 (15.09.2010):
- В макросе (импорт по шаблону) теперь все буквы опускаются в нижний регистр;
- Добавлен макрос (импорт по шаблону). Он вставляет имя рубрики транслитом с опусканием регистра всех букв.
Content Downloader версии 5.17 (15.09.2010):
- В функцию создания файла импорта по шаблону добавлен макрос (это числовое значение, которое увеличивается или уменьшается на n при каждом цикле);
- Доработана функция "добавление указанного текста в документы" (вкладка "преобразование документов" в массовой обработке файлов). Теперь можно вставлять в документы разные строки из файла.
Content Downloader версии 5.15 (15.09.2010):
- Доработана функция автопростановки заголовков в массовой обработке файлов;
- Теперь в расширенной функции добавления файлов выделение следующей партии идет от последнего добавленного элемента плюс один.
Content Downloader версии 5.12 (14.09.2010):
- "Расширенная функция добавления файлов" получила опцию "использовать точное значение";
- Значительно доработана функция автозополнения полей описания (description);
- Доработан макрос (импорт по шаблону), теперь все пробелы заменяются на нижнее подчеркивание.
Content Downloader версии 5.08 (14.09.2010):
- Устранена ошибка в массовой обработке файлов (при автопроставлении атрибутов alt и title к картинкам);
- Теперь текст макроса (импорт по шаблону) будет чиститься от лишних символов.
Content Downloader версии 5.07 (13.09.2010):
- Добавлено множество опций в функцию импорта по пользовательскому шаблону.
Content Downloader версии 5.00 (12.09.2010):
- Доработан алгоритм рассчета дат публикации (теперь перемешивает гораздо лучше);
- При добавлении ссылок через встроенный браузер все "&" теперь заменяются на "&";
- Создана функция импорта по пользовательскому шаблону (подойдет почти под любую CMS).
Content Downloader версии 4.57 (09.09.2010):
- Добавлена функция замены символов в массовую обработку файлов;
- Теперь, при рассчете дат публикации (импорт в WP, Zebrum), присвоение дат происходит не по возрастанию, а в случайном порядке;
- Пара незначительных исправлений и изменений.
Content Downloader версии 4.53 (06.09.2010):
- Пара незначительных исправлений и изменений.
Content Downloader версии 4.51 (03.09.2010):
- Добавлен чекбокс "перезапись" (для картинок). Если он включен, то все картинки с одинаковыми именами перезапишутся, если нет, то каждой присвоится уникальное имя.
Content Downloader версии 4.48 (02.09.2010):
- Теперь грузятся изображения со ссылками вида: "../img.jpg", "../../img.jpg";
- Исправлен центр обновлений (при загрузке обновления теперь работает progress bar).
Content Downloader версии 4.47 (01.09.2010):
- Сделан инсталлятор;
- Теперь при каждом запуске программа проверяет наличие доступных обновлений;
- Доработана функция "ссылаться на источник";
- Теперь относительные ссылки с точкой или двумя точками вначале корректно конвертируются в абсолютные.
Content Downloader версии 4.12 (30.08.2010):
- Исправлен баг с сохранением картинок в разные папки (теперь адреса изменяются правильно).
Content Downloader версии 4.07 (30.08.2010):
- UserAgent программы сменен на эксплореровский "MSIE 6.0" (это позволит парсить olx.ru и множество других сайтов).
Content Downloader версии 4.03 (29.08.2010):
- в функцию авторизации добавлены дополнительные поля (теперь можно логиниться на DLE сайтах);
- пара незначительных багфиксов.
Content Downloader версии 4.01 (27.08.2010):
- исправлен баг с границами (в некоторых случаях контент не сохранялся);
- переработана функция предпросмотра для контента;
- усовершенствована функция проверки тегов (ранее могли быть ошибки при загрузке картинок или при преобразовании html в txt).
Content Downloader версии 4.00 Beta (23.08.2010):
- Обновлена функция предпросмотра к парсингу контента.
Content Downloader версии 4.00 Alpha (23.08.2010):
- Теперь парсить контент можно в многопоточном режиме (до 10 потоков);
- Подправлена функция авторизации;
- Огромное количество изменений, несколько исправлений и нововведений.
PS: 4.00 Alpha - тестовая Альфа версия продукта. Многопоточная версия тестировалась только на WIN XP SP2. Предпросмотр парсинга контента не был переделан под многопоточную версию.
Content Downloader версии 3.84 (17.08.2010):
- в функцию htm to txt добавлены дополнительные опции;
- несколько незначительных исправлений, изменений и улучшений.
Content Downloader версии 3.81 (17.08.2010):
- полностью переписана функция htm to txt;
- множество незначительных исправлений, изменений и улучшений.
Content Downloader версии 3.77 (15.08.2010):
- добавлена опция "парсить вместе с границами";
- улучшена функция расширенного добавления файлов (обработка и импорт контента);
- исправлена функция задания границ парсинга (были проблемы с заданием повторяющихся и обычных границ);
- добавлена возможность вставлять произвольный тег между статьями (при сохранении контента в один файл);
- длина поля ввода в правый клик по полю со ссылками - "добавить ссылки" увеличена с 999 999 до 9 999 999 символов.
Content Downloader версии 3.53 (15.08.2010):
Общие изменения:
- ВАЖНО: переработана функция преобразования html кода в текст (устранены ошибки и добавлена возможность выбора тегов, которые не следует удалять).
Изменения, касающиеся функции обработки и импорта в КМС:
- добавлены отключаемые опции: "добавлять рубрики" и "добавлять метки" при создании файлов импорта для Zerber;
- исправлена функция удаления пустых строк в начале документов;
- в массовую обработку добавлены функции удаления пустых строк во всем тексте и в концах документов;
- в режиме веб-предпросмотра страниц тулбар с тегами теперь исчезает;
- добавлена функция поиска в документах;
- исправлена функция автозаполнения полей заголовков (ранее был баг с пустыми документами после обработки).
Content Downloader версии 3.41 (12.08.2010):
Общие изменения:
- ВАЖНО: исправлена ошибка массовой обработки файлов: на некоторых системах по завершении обработки ничего не происходило, теперь все работает как надо (скажем спасибо WeXX);
- добавлена строка с отчетами в инструменте добавления ссылок через встроенный браузер;
- добавлена функция подсветки элементов в проекте, длина которых более указанного количества символов (для вызова - правый клик по дереву: "подсветка элементов").
Изменения, касающиеся функции обработки и импорта в КМС:
- добавлена функция создания файлов импорта для Zerber.
Content Downloader версии 3.37 (10.08.2010):
Общие изменения:
- добавлена функция "автокартинки" (ищите в "массовая обработка файлов").
Content Downloader версии 3.30 (10.08.2010):
Общие изменения:
- добавлена функция создания файлов импорта для autoblog-x и satellite-x.
Content Downloader версии 3.00 beta 8 (07.08.2010):
Изменения, касающиеся функции обработки и импорта в КМС:
- доработана функция "автопростановка тегов - вставка тегов в текст документов": теперь тег (в т.ч. и ) будут вставляться только в конце предложения (опция отключается) (скажем спасибо Yokko2000).
Content Downloader версии 3.00 beta 7 (06.08.2010):
Общие изменения:
- горячая клавиша автовставки {num} сменена на F2;
- теперь при создании файла импорта ставится рандомное время постов (+ диапазон: постов в день).
Content Downloader версии 3.00 beta 3 (05.08.2010):
Общие изменения:
- теперь программа поддерживает редирект (ранее наблюдался баг с пустыми страницами);
- слегка изменен интерфейс программы;
- появился параметр "минимальная длина статей" (если статья короче n символов, то страница не будет сохраняться);
- множество багфиксов и незначительных изменений.
Изменения, касающиеся функции обработки и импорта в КМС:
- исправлен баг клонирования документов при совпадении имен файлов;
- переработана функция предпросмотра в браузере;
- добавлена функция "авторубрики";
- добавлены функции автопростановки тегов alt и title к картинкам;
- исправлена функция "вырезание частей документов";
- множество багфиксов и незначительных изменений.
Content Downloader версии 2.87x7 (23.07.2010):
Общие изменения:
- теперь при сохранении в txt виде можно включать опцию "оставить теги img" (не удалять теги картинок).
Content Downloader версии 2.87x6 (22.07.2010):
Общие изменения:
- добавлена функция ручного добавления ссылок через встроенный браузер.
Content Downloader версии 2.87x5 (21.07.2010):
Общие изменения:
- добавлена функция временной паузы к функции сканирования сайта;
- добавлена возможность задавать шаблоны ссылок (для очереди) к функции сканирования сайта;
- несколько незначительных исправлений и изменений.
Content Downloader версии 2.87x4 (21.07.2010):
Общие изменения:
- добавлена функция задания повторяющихся границ парсинга;
- исправлено несколько ошибок парсинга.
Content Downloader версии 2.87x3 (21.07.2010):
Общие изменения:
- ускорение загрузки картинок примерно раза в 3.
Content Downloader версии 2.87x2 (21.07.2010):
Общие изменения:
- Устранено зависание программы при парсинге большого количества документов (загрузка картинок теперь работает раза в 3 медленнее, но зато теперь все стабильно).
Content Downloader версии 2.87x (20.07.2010):
Общие изменения:
- Попытка исправления зависания программы при парсинге большого количества документов (тестируем).
Content Downloader версии 2.87 (20.07.2010):
Общие изменения:
- добавлена функция залогинивания на сайтах;
- добавлена возможность загружать ссылки из xml карты сайта с применением фильтров;
- добавлена возможность применять фильтры к уже спарсенному списку ссылок (правый клик по полю со ссылками);
- исправлена ошибка с пустым или неправильным документом при задании одинаковых границ парсинга (начала и конца);
- теперь скачиваются изображения с расширением JPEG (ранее только JPG);
- исправлены проблемы с регистром ссылок при парсинге ссылок (масло масленое, но по другому никак ;))
- база синонимов увеличена до 62706 записей;
- множество багфиксов и незначительных изменений.
Изменения, касающиеся функции обработки и импорта в КМС:
- теперь работает навигация стрелками по дереву документов проекта (скажем спасибо Krumm).
Content Downloader версии 2.10 (19.06.2010):
Общие изменения:
- добавлена возможность задавать две границы парсинга;
- добавлено значительное количество параметров к тегам картинок при вставке.
Content Downloader версии 2.08 hotfix! (08.05.2010):
Общие изменения:
- устранены ошибки при работе с изображениями проекта (включая функцию массового ресайза).
Content Downloader версии 2.07 (07.05.2010):
Общие изменения:
- добавлены функции обновления ветки и открытия проводника ко всем деревьям каталогов (вызываются через правую кнопку мыши);
- теперь, при генерации html сайта, имена файлов, написанные на кириллице, преобразуются в транслит;
- добавлена возможность сохранения контента в один файл;
- теперь можно изменять имя папки для картинок;
- появилась возможность задавать несколько шаблонов для парсинга ссылок;
- переработана система сохранения/загрузки проектов парсинга;
- база синонимов увеличена до 62000 записей +исправление и чистка некоторых синонимов.
Content Downloader версии 2.01 (23.04.2010):
Общие изменения:
- добавлена функция синонимайзинга (рерайта) текста в парсинг файлов, в обработку и импорт в КМС, в массовую обработку файлов.
Content Downloader версии 2.00 release (22.04.2010):
Общие изменения:
- добавлена функция генерации сайтов;
- добавлены функции работы с изображениями;
- произведено огромное количество нововведений, исправлений и изменений.
Content Downloader версии 1.97 (08.04.2010):
Общие изменения:
- исправлена функция задания границ парсинга (на некоторых сайтах открывалось пустое окно);
- доработана функция удаления тегов ссылок: теперь удаляются теги ссылок, написанные прописными буквами;
- теперь относительным ссылкам картинок префикс присваивается автоматически;
- добавлена функция сброса фильтров;
- теперь ссылки на картинки с верхним регистром текста расширения не отсеиваются;
- теперь, при сохранении файлов с уже существующим именем, появляется диалоговое окно с вопросом о перезаписи;
- теперь, при выходе, сохраняется позиция главных окон;
- теперь, при открытии или сохранении файлов/проектов, сохраняются их директории;
- множество незначительных изменений и багфиксов.
Изменения, касающиеся функции обработки и импорта в КМС:
- доработана расширенная функция добавления файлов: работать стала быстрее + несколько незначительных изменений и исправлений;
- добавлена функция автопростановки тегов more;
- добавлена функция удаления строк документов по заданному шаблону (например, подойдет для удаления ссылок на первоисточник или различных подписей);
- доработана функция импорта файлов: теперь можно публиковать только указанную ветку и ее ответвления;
- теперь, при создании файла импорта в вордпресс, можно разбивать файлы по размеру;
- исправлен баг с переходом на новую строку в поле редактирования кода;
- добавлены функции возврата к изначальным/несохраненным версиям документа(ов);
- доработана функция вырезания частей документов в массовой обработке файлов: теперь можно задать одну из границ (при задании только начальной границы вырежется весь стоящий после нее текст, при задании только конечной границы вырежется весь текст до нее);
- к редактору кода/текста в всплывающее меню добавлены базовые функции простого текстового редактора;
- теперь запоминается положение полосы прокрутки в каждом документе;
- добавлены функции простановки html тегов;
- множество незначительных изменений и багфиксов.
Content Downloader версии 1.91 (01.04.2010):
Общие изменения:
- теперь, в процессе парсинга, через каждые обработанные 10 документов, сохраняются все настройки программы и текущий прогресс;
- исправлен предпросмотр html при парсинге.
Изменения, касающиеся функции обработки и импорта в КМС:
- исправлен баг с переводом каретки на новую строку (отдельное спасибо Serpan);
- добавлена функция разбиения статей;
- добавлена функция создания файла импорта в Zebrum Lite;
- теперь отображается количество выделенных символов в поле для редактирования статей;
- добавлено поле описание (description);
- добавлена функция расширенного добавления файлов;
- добавлена функция вырезания текста между определенными границами в массовой обработке файлов.
Content Downloader версии 1.89 hotfix! (27.03.2010):
Общие изменения:
- при сохранении файлов при парсинге, все пробелы в имени файла заменяются на символ "_";
- устранена проблема с парсингом ссылок (отдельное и большое спасибо askjdh);
- множество незначительных изменений и багфиксов.
Изменения, касающиеся функции обработки и импорта в КМС:
- устранен баг с активностью кнопки добавления файлов после создания документа;
- добавлены инструменты для простановки тегов;
- множество незначительных изменений, нововведений и багфиксов.
Изменения, касающиеся массовой обработки файлов:
- слегка увеличена ширина и высота окна;
- добавлена панель инструментов для управления списком элементов и выделением;
- теперь, при клике на элемент дерева, без зажатой клавиши shift или ctrl выделение снимается.
Content Downloader версии 1.87 (25.03.2010):
Общие изменения:
- теперь ссылки на картинки будут разделяться не "\", как раньше, а правильным символом - "/";
- теперь, при выборе опции "сохранять картинки в одну папку", первая картинка сохраняется (ранее не сохранялась);
- исправлен баг с границами парсинга (отдельное спасибо Sah), до этого они периодически пропадали и парсилась не та часть страницы;
- теперь программа распознает теги картинок, написанные прописными буквами;
- максимальные значения длины текста во всех полях программы увеличены с 65 000 до 999999 символов;
- добавлена функция импорта контента в вордпресс.
Content Downloader версии 1.80 (20.03.2010):
Общие изменения:
- максимальное значение длины имени файла при сохранении увеличено до 87 символов;
- при закрытии проекта границы заголовка теперь будут не пустыми, а иметь значение тега заголовка title;
- устранены проблемы с koi кодировкой, теперь все кодируется правильно;
- теперь, при сохранении статей, числовой индекс в именах файлов появляется только при совпадении имен файлов;
- поправлено сохранение некоторых настроек при закрытии программы;
- при закрытии программы все функции теперь приостанавливаются;
- в трей добавлена иконка приложения;
- теперь программа сворачивается в трей;
- теперь, когда присваиваются именам файлов заголовки статей, в эти имена могут включаться и цифры;
- множество незначительных изменений и багфиксов.
Изменения, касающиеся функции выбора директории сохранения статей:
- теперь, при открытии проводника несуществующей папки, эта папка создается и открывается проводник;
- при создании новой папки раскрывается родительская директория и выделяется нужный элемент;
- размер области выбора папок увеличен почти в два раза.
Content Downloader версии 1.79 (16.03.2010):
Общие изменения:
- исправлена функция вставки ссылки на первоисточник;
- реализована функция закрытия проекта;
- реализована функция отображения имени текущего проекта в заголовке программы (по предложению Vitalyj);
- добавлена функция паузы между запросами при парсинге;
- при совпадении имен файлов статей они теперь не перезаписываются, а переименовываются;
- теперь, при сохранении в txt формате с использованием ссылки на первоисточник, тег ссылки не удаляется;
- множество незначительных изменений и багфиксов.
Изменения, качающиеся функции задания границ парсинга:
- добавлена опция включения/отключения переноса строк (по предложению Vitalyj);
- добавлен хоткей (F3) к "найти далее";
- теперь можно задавать как одну из границ (либо конец, либо начало), так и две границы парсинга (при задании только конца парсинга, текст будет парситься от начала документа до границы, при задании только начала парсинга, текст будет парситься от границы до конца документа);
- тот текст страницы, который будет подлежать парсингу, теперь выделяется черным цветом;
- если границ парсинга нет или они заданы некорректно, то будет парситься весь документ целиком;
- исправлена функция кодирования текста при открытии диалогового окна задания границ парсинга.
Content Downloader версии 1.78 (10.03.2010):
Общие изменения:
- исправлена функция поиска в коде страницы;
- устранена проблема при сохранении файлов;
- при сохранении ссылки на первоисточник она теперь активна и заключается в тег noindex (+nofollow);
- устранены ошибки при сохранении документов (при определенных параметрах они не сохранялись);
- добавлена поддержка koi кодировки;
- множество незначительных изменений и фиксов.
Content Downloader версии 1.77 (10.03.2010):
Общие изменения:
- появилась возможность добавлять ссылку на первоисточник к статьям;
- теперь, при сохранении в текстовом виде, тег заголовка не удаляется;
- устранены проблемы с загрузкой несуществующих картинок (ранее программа подвисала);
- реализована функция сохранения/загрузки проектов;
- на статус баре теперь отображается процесс загрузки статьи;
- доработана функция приостановки парсинга;
- множество незначительных изменений и багфиксов;
- исправлен баг с загрузкой картинок по относительным ссылкам;
- исправлен баг с "одинаковым превью";
- исправлены проблемы с именами файлов;
- появилась функция удаления ссылок при сохранении (как внешних, так и внутренних).