Как стать автором
Обновить

Facebook объяснила причины масштабной утечки данных пользователей

Информационная безопасность *Социальные сети и сообщества

Facebook заявила, что причиной утечки данных 533 млн пользователей стала не хакерская атака, а извлечение данных с платформы. По словам представителей соцсети, злоумышленники смогли извлечь эти данные до сентября 2019 года.

Читать далее
Всего голосов 12: ↑12 и ↓0 +12
Просмотры 14K
Комментарии 9

Обновление Microsoft начало переводить работу пользователей с Chrome на Edge

Google Chrome Браузеры Microsoft Edge

Microsoft с целью перевести пользователей браузера Chrome на собственный Edge начала выпускать обновления, предназначенные исключительно для браузера Google. Так, начиная с апрельской версии Edge, в браузере появилась функция, позволяющая пользователям постоянно автоматически импортировать данные из Chrome.

Читать далее
Всего голосов 1: ↑1 и ↓0 +1
Просмотры 4.9K
Комментарии 17

Импорт данных из MySQL в SPSS 15

Чулан
Так случилось, что мне для анализа понадобились данные, собираемые движком сайта. Данные хранятся в MySQL, а анализировать мне их удобнее было в SPSS. Найти инструкцию, как осуществить этот специфичный импорт, мне не удалось, поэтому привожу здесь инструкцию для тех, кто столкнётся с подобной проблемой.

Читать дальше →
Всего голосов 5: ↑4 и ↓1 +3
Просмотры 590
Комментарии 0

Импорт сайтов из разных CMS на Drupal

Drupal *
Я думаю, что у каждого, кто использует Drupal в своей работе, периодически возникают задачи переноса сайтов, работающих на других CMS, или просто задачи импорта данных на платформу Drupal.

Такие задачи периодически возникают и у меня, но раньше я весь импорт делал написанием скрипта на php, который просто записывает нужную информацию прямо в БД Drupal. Я, конечно же, знал, что есть механизмы, которые позволяют добавлять данные, используя API Drupal, но как-то разбираться с ними было лень, да и скрипт для записи сразу в БД пишется довольно быстро.

Когда сайт на Drupal достаточно простой и на нем не используются какие-то сложные модули (и их мало), то такой принцип импорта (прямая запись в БД) себя оправдывает. Но что делать, когда нужно перенести данные на очень сложный сайт со множеством модулей и их сложной настройкой?

В этом случае очень сильно поможет знание API Drupal'a, т.к. всю работу по правильному апдейту всех взаимосвязанных таблиц с учетом всех хитрых настроек за нас сделает Drupal.

Как оказалось, использование API Drupal'a не то чтобы просто, а очень просто. Про это и будет сегодняшняя статья.
Читать дальше →
Всего голосов 63: ↑55 и ↓8 +47
Просмотры 6.2K
Комментарии 49

Как эффективно импортировать большие данные

Блог компании CUBRID
Иногда нам необходимо импортировать очень большие данные в базу, которые порой достигают нескольких десятков гигабайтов. Мы проводим регулярные бэкапы, горячие бэкапы, в важных сервисах используем репликацию и Высокую Доступность. Чаще всего пользователи полагаются на встроенную функцию СУБД, используют ее без каких-либо изменений, ждут пока процесс импортирования закончится, а иногда и вовсе не дожидаются.

В этом блоге я хочу рассказать о разных способах импортирования данных в СУБД CUBRID, уточнив, какой из них более эффективен, и почему. Часть этих рекомендаций можно применить также и в других системах управления базами данных.

Итак, в CUBRID импортирование данных можно произвести, используя следующие инструменты.
  • Самый легкий способ — это использовать CUBRID Manager
  • Также Вы можете использовать PHP, Java и другие драйвера
  • Иначе можно использовать CSQL, CUBRID SQL интерпретатор в командной строке.
  • Можно также настроить репликацию или Высокую Доступность, но это за рамками этой статьи.

Сначала я приведу результаты небольшого теста, чтобы Вы смогли увидеть общую картину и понять, почему определенные из вышеприведенных решений работают быстрее, чем другие. Затем я расскажу о рекомендациях, которые помогут Вам значительно ускорить процесс импортирования данных.
Читать дальше →
Всего голосов 2: ↑1 и ↓1 0
Просмотры 1.8K
Комментарии 0

Перевод в электронный вид медицинской карты

Законодательство в IT

Доброго времени суток, уважаемые!

Долго задавался вопросом, почему интеграторы в большинство внедряемых систем стараются не переносить исторические данные прежнего ПО или архивов, а начинают информатизацию с момента внедрения.
Особенно беспокоит такое отношение интеграторов в сфере информатизации здравоохранения. Этот топик посвящен рассмотрению возможностей перевода бумажных толстых и «залохматившихся» медицинских карт в нормализованный электронный вид, доступный для анализа.
Читать дальше →
Всего голосов 28: ↑26 и ↓2 +24
Просмотры 6.8K
Комментарии 180

Импорт дней рождений из AD на портал SharePoint

Блог компании Ти Ай Системс
Для начала мы определимся, что дату рождения будем хранить в атрибуте AD c именем extensionAttribute1. Дату рождения необходимо вводить в формате ММ.ДД.ГГГГ(ММ-месяц, ДД-день, ГГГГ-год). То есть день 5 июля 1987 года, будет внесён как 07.05.1987

image
Читать дальше →
Всего голосов 3: ↑1 и ↓2 -1
Просмотры 9.1K
Комментарии 2

Импортирование данных класификатора ОКАТО в базу MySql

MySQL *Программирование *
Из песочницы
Возникла у меня необходимость добавить к моему приложению справочники с регионами России и городами. Первая идея которая меня посетила это поискать готовые файлы XML с регионами и городами в интернете, и в случае успеха импортировать данные в мои таблицы. Оптимизма поубавилось когда я начал искать. Конечно никто для меня специально не готовил эти данные, но это и не удивительно. Имея уже однажды опыт импортирования данных из КЛАДР в SqlServer, в структуру отличную от КЛАДР, я решил что придется снова повторить подвиг и организовывать импорт из КЛАДР в мою структуру. Я прекрасно помнил и тот факт что в КЛАДР данные хранятся в таблицах DBF, а импортировать данные
Читать дальше →
Всего голосов 4: ↑1 и ↓3 -2
Просмотры 6.5K
Комментарии 6

Идеальная миграция на примере Catch->Evernote

Разработка веб-сайтов *
Из песочницы
Помним, скорбим.
Сегодня мы первый день без Catch.com.

Так нельзя


Спросите у обычного пользователя или IT-специалиста о наиболее раздражающих облачных факапах. В список вариантов ответов обязательно войдет миграция данных с умерших сервисов. Если даже Google с его безграничными ресурсами уже не раз засветился в чересчур ретивой оптимизации сил и средств, то что уж говорить про других. Не нужно напоминать к чему это приводит для простых смертных — от потери времени до невозможности переноса без потерь. Тем приятнее говорить про исключения.
Читать дальше →
Всего голосов 8: ↑7 и ↓1 +6
Просмотры 4.4K
Комментарии 3

Импорт данных в интернет-магазины

CMS *1С-Битрикс *
image


Что же мы подразумеваем под импортом данных в интернет-магазины? Для объяснения опишем сценарий, который наиболее типичен для владельцев интернет-магазинов.
Обычно владельцы интернет-магазинов хотят импортировать актульные данные из поставщиков. Им это нужно для того, чтобы актуализировать состояние базы данных своего интернет-магазина, чтобы у них быстро появлялись новинки, чтобы те товары, которые уже не продаются у поставщика, не были доступны для заказа в их интернет-магазине. И повторять этот процесс они хотят как можно чаще.
Читать дальше →
Всего голосов 31: ↑18 и ↓13 +5
Просмотры 72K
Комментарии 20

Импорт данных в интернет-магазины: алгоритм, который упростит вам жизнь

CMS *1С-Битрикс *Разработка под e-commerce *
В предыдущей статье habrahabr.ru/post/209040 были рассмотрены общие вопросы импорта данных в интернет-магазины, связанные с этим особенности, преимущества и недостатки методов. Можно сделать вывод о том, что единственным эффективным способом в долгосрочной перспективе является разработка собственных модулей импорта данных в каждый интернет-магазин (имеется в виду прямой импорт в базу данных конкретной CMS). Почему?
Читать дальше →
Всего голосов 8: ↑6 и ↓2 +4
Просмотры 30K
Комментарии 2

Новое в Wolfram Language: функция WikipediaData для интеграции с Википедией и обработки её данных

Блог компании Wolfram Research Программирование *Открытые данные *
Перевод
С момента создания сервиса Wolfram|Alpha, Википедия занимала особое место на пути его развития. Мы обычно используем её не как первичный источник данных, но скорее в качестве важнейшего ресурса для улучшения распознавания естественного языка. В частности, для добычи данных о том, как люди описывают те или иные вещи в разговорном/официальном стиле.

В течение многих лет мы разрабатывали различные инструменты для анализа и извлечения информации из Википедии, однако теперь мы добавляем «сервис интеграции» с Википедией, который будет доступен в новой версии языка Wolfram Language (системе Mathematica 10.1, выходящей уже совсем скоро). Теперь встраивать контент из Википедии в рабочие процессы внутри Wolfram Language стало значительно проще.

Конечно, вы можете просто взять текст из статьи в Википедии и передать его новым функциям Wolfram Language для обработки текста и визуализации:




Читать дальше →
Всего голосов 20: ↑18 и ↓2 +16
Просмотры 5.4K
Комментарии 0

Изучаем граф-ориентированную СУБД Neo4j на примере лексической базы Wordnet

Python *Программирование *SQL *Data Mining *NoSQL *
Tutorial
СУБД Neo4j — это NoSQL база данных, ориентированная на хранение графов. Изюминкой продукта является декларативный язык запросов Cypher.

Cypher позаимствовал ключевые слова типа WHERE, ORDER BY из SQL; синтаксис из таких разных языков как Python, Haskell, SPARQL; и в результате появился язык, позволяющий делать запросы к графам в визуальной форме наподобие ASCII art. Например, заголовок данной статьи я бы представил в виде графа (Neo4j) — [изучаем] -> (Wordnet). И это почти готовый запрос к базе данных!


Читать дальше →
Всего голосов 9: ↑8 и ↓1 +7
Просмотры 22K
Комментарии 0

Импортируем DXF чертеж в программе на Java, наступая на все грабли этого «простого» формата

CAD/CAM *Геоинформационные сервисы *
AutoCAD и подобные ему САПР давно уже стали стандартом в области проектирования, и неудивительно что таким же стандартом стали широко используемые в них форматы файлов DWG/DXF. Так что если вы разрабатываете какое-то решение для архитекторов и проектировщиков, то умение работать с этими форматами (ну или хотя бы с одним из них) — must have фича вашего продукта.



В рамках своего вебсервиса для симуляции движения пешеходов пришлось и мне озаботиться импортом генпланов в этих форматах. Раньше с САПР я дела не имел, поэтому наивно думал «да что там, подумаешь — еще один формат чертежей, линии и многоугольники, что там может быть сложного?». Но в процессе работы выяснилось что сложного там может быть достаточно, некоторые нюансы вполне похожи на древние костыли, тянущиеся из глубин веков, при этом многие вещи толком не документированы в спецификациях самого формата (например работа с блоками или с кривыми). Видимо они считаются очевидными для любого чертежника, но что делать если вы родом из другой области, и таких знаний не имеете?

В общем под катом — перечисление граблей и решений, которые не удалось нагуглить и пришлось добывать полуночными бдениями над чертежами.
Читать дальше →
Всего голосов 19: ↑19 и ↓0 +19
Просмотры 16K
Комментарии 4

Как мы учили Facebook делать сайты или План “Конверт”

Блог компании uKit Group Разработка веб-сайтов *Анализ и проектирование систем *Facebook API *
В конце прошлого года нам поставили задачу — сделать инструмент, который автоматически создавал бы адаптивный сайт на основе информации со страницы бизнеса в соцсети. На этом пути мы:

  • Познакомились с правнуком Льва Термена и выполнили его просьбу.



  • Похоже, первыми реализовали автоматический перенос отзывов с Facebook на другие платформы.
  • И изобрели еще один способ ускорить работу над недорогим сайтом для фрилансера и заказчика.
А начиналось все с чистого листа
Всего голосов 37: ↑32 и ↓5 +27
Просмотры 11K
Комментарии 21

Модуль импорта товаров в Битрикс

CMS *1С-Битрикс *Разработка под e-commerce *

В данном посте мы хотели бы поделиться нашим опытом разработки модуля импорта в Битрикс с сообществом разработчиков.

Читать дальше →
Всего голосов 6: ↑3 и ↓3 0
Просмотры 14K
Комментарии 6

Импорт/экспорт баз данных. Что нужно в подобных приложениях? Опрос

SQL *Microsoft SQL Server *


Приложений для конвертации данных в БД очень много и у каждого есть какая-то особенность. Так как сам пишу универсальное приложение ImportExportDataSql для импорта/экспорта данных (пока только Microsoft SQL Server и под Windows), то хочу собрать статистику о том, какими функциями вы пользуетесь в подобных приложениях и за что Вам нравится то или иное приложение?

Надеюсь, что у Вас найдется пару минут, чтобы принять участие в опросе.
Читать дальше →
Всего голосов 9: ↑8 и ↓1 +7
Просмотры 3.5K
Комментарии 11