본문 바로가기

분류 전체보기818

[파이썬] 웹 크롤링 vs 웹 스크랩핑 웹 크롤링 vs 웹 스크랩핑 1. 웹 크롤링(Crawling) 방대한 범위에서 데이터를 정해진 규칙대로 수집, 데이터의 양을 우선으로 한다. 웹 크롤러(자동화 봇)가 일정규칙으로 웹페이지 탐색 ※ 웹 크롤러: 사이트나 네트워크가 제공할 수 있는 것을 끝없이 탐색하면서 스스로 웹 페이지를 탐색할 수 있는 프로그램 2. 웹 스크랩핑(Scraping) 작은 범위에서 타켓이 되는 데이터를 명확하게 수집한다. 웹 사이트 상에서 원하는 정보를 추출하는 기술로 특정 웹 사이트 또는 페이지에서 특정 정보 검색 🟩 크롬 개발자 도구 크롬 오른쪽 상단 더보기 탭 - 도구 더보기 - 개발자 도구(Ctrl+Shift+i) CSS Selector - Elements Tab HTTP 처리과정 - Network Tab 2022. 6. 9.
[안드로이드][활용] 비즈니스 계정으로 게시물 가져오기 Meta for Developers에서 비즈니스 계정 App을 통해서 Instagram 최신 게시물을 가져오도록 하겠습니다. 우선적으로 내 앱 탭을 통해서 현재 등록된 관리자 앱을 확인합니다. 비즈니스 유형으로 된 App을 들어가서 Instagram 그래프 API 항목을 있으면 됩니다. ※앱 검수 항목에서 Oembed Read 기능은 앱 검수 승인이 되어 있어야 합니다. 이제부터 게시물을 가져오도록 하겠습니다. 1. 권한 요청 instagram_basic pages_show_list 2. 사용자 액세스 토큰 받기 - 도구 탭 - 그래프 API 탐색기로 이동 Generate Access Token으로 사용자 액세스 토큰을 생성하시면 됩니다. 3. 사용자 페이지 가져오기 Get /me/accounts or .. 2022. 6. 9.
[정보] 아마존 익스프레스 멘트 SNL 이상엽편 아마존 익스프레스 멘트가 계속 생각이 나서 유튜브에서 영상보고 정리합니다. 에버랜드 아마존 익스프레스 소울리스좌 멘트 내 앞에 있는 안내 근무자의 안내를 받아 한 자리에 두분 씩 한 보트에 열 분이서 머리 젖습니다 옷도 젖습니다 신발 젖습니다 양말까지 젖습니다 ​ 옷 머리 신발양말 다 다 젖습니다 물에 젖고 물만 맞는 여기는 아마존 아 마 (아) 존조로존조로존 물에 젖고 물만 맞는 여기는 아마 존입니다 ​ 한 자리에 두 분 한 보트에 열 분 돌아가는 십인승에 보트를 타고 한 자리에 두 분 한 보트에 열 분 까지 다 젖습니다 머리머리머리 옷 옷 옷 (아)신발이 양말이 다다 다다 젖습니다 ​ 머리부터 머리 머리부터 옷 머리부터 신발 머리부터 양말 옷 머리 신발 양말 신발 양말 머리 싹다 젖습.. 2022. 6. 7.
[RxJava] Single 개념 이해 Single 1. 개념 Single은 Observable의 변형된 형태이다. Observable과 비슷하지만, 여러 개의 데이터를 발행할 수 있는 Observable과 달리 Single은 한 개의 데이터(혹은 에러)만을 발행한다. Observable은 3가지 알림을 보내는 반면, Single은 onSuccess, onError 2가지의 알림을 보낸다. onSuccess : 데이터 하나를 발행함과 동시에 종료 onError : 에러가 발생했음을 알림 RxJava (and its derivatives like RxGroovy & RxScala) has developed an Observable variant called “Single.” A Single is something like an Observabl.. 2022. 6. 5.
C++ 객체 지향 프로그래밍 절차 지향 프로그래밍 vs 객체 지향 프로그래밍 1. 절차 지향 프로그래밍(Procedural Programming) 절차 지향 프로그래밍이란 실행하고자 하는 절차대로 일련의 명령어를 나열하여 프로그래밍하는 방법이다. 작업을 절차로 표현하여 명령들의 순서나 흐름에 중점을 둔다. 절차 지향 프로그래밍은 흐름도 를 설계하여 흐름도 상의 동작들을 함수로 작성 후 흐름도에 따라 동작이 실행되도록 작성한다. 2. 객체 지향 프로그래밍 객체 지향 프로그래밍은 물체 간의 관계, 상호 작용 등으로 복잡하게 구성된 실세계에 가깝게 프로그래밍을 모델링한다. 실제 세계의 물체를 객체 로 표현하고, 객체들의 관계 와 상호 작용을객체 지향 기법으로 구현한다. C++는 객체 지향 개념을 도입하여 이미 만들어진 C++ 클래스를 상.. 2022. 6. 5.
C# Data Type 데이터 타입 모든 변수에는 데이터 타입이 있고, 타입에 따라서 저장할 수 있는 값의 종류와 범위가 달라집니다. 데이터 타입 중에서도 기본 타입을 정리해봅니다.(C#에는 자바보다는 더 많은 데이터 타입이 있습니다.) Java Type C# Type Value boolean boolean True or false byte byte 8bit unsigned integer sbyte 8bit signed integer short short 16bit signed integer int int 32 signed integer long long 64 signed integer ushort 16bit unsigned integer uint 32bit unsigned integer ulong 64bit unsigned .. 2022. 6. 2.
C#[WPF] 디자인 패턴 중 MVVM 패턴을 알아보자 MVVM 디자인 패턴 : MVVM(Model View ViewModel) MVVM 패턴은 Command 패턴과 Data Binding 2가지 패턴을 사용한다.(여기선 Data Binding 패턴으로 사용) ■ Model DataModel은 비즈니스 클래스로 구성된다. UI에 제공된 데이터를 갖고 있다. DataModel은 쉽게 단위 테스트가 가능하다. ■ View View는 UI이다. 이상적으로 View는 순수 Xaml로 구성된다. View는 자동화된 테스트를 사용해 테스트가 어렵기 때문에 View의 코드 양을 줄여야 하는 이유이다. View의 Datacontext는 ViewModel이다. ■ ViewModel ViewModel은 아래의 같은 기능을 담당한다. 하나의 뷰에 대한 메서드로 속성 및 액션을 .. 2022. 6. 1.
[RxJava] 4. Observable의 종류 RxJava의 근간이 되는 Observable 클래스는 소프트웨어 디자인 패턴인 Observer Pattern(1)을 근간으로 되어 있습니다. (1) 옵서버 패턴(observer pattern)은 객체의 상태 변화를 관찰하는 관찰자들, 즉 옵서버들의 목록을 객체에 등록하여 상태 변화가 있을 때마다 메서드 등을 통해 객체가 직접 목록의 각 옵저버에게 통지하도록 하는 디자인 패턴이다. 주로 분산 이벤트 핸들링 시스템을 구현하는 데 사용된다. 발행/구독 모델로 알려져 있기도 하다. 참고글: 옵서버 패턴 Observable에는 데이터를 로딩하고 바로 그 로딩된 내용을 반영할 것인가(Hot Observable) 아니면 사용자의 요청이 있을 때까지 기다릴 것인가(Cold Observable)라는 의미의 2 종류가 .. 2022. 5. 31.
[RxJava] 1. RxJava 란? 1. RXJAVA의 유래 RXJAVA는 요즘 많은 사람들이 자주 즐겨보는 넷플릭스에서 소개된 기술입니다. 2013년 2월에 처음으로 소개되었습니다. 당시 넷플릭스는 REST 기반의 서비스 API 호출 횟수와 서비스의 전반적인 성능을 개선하는 프로젝트를 진행하였으며, 그에 대한 결과물로 .NET 환경의 리액티브 확장 라이브러리를 JVM에 포함하여 RXJAVA를 만들었습니다. 참고 글: ReactiveX https://reactivex.io/intro.html 2. RXJAVA를 사용하는 이유 Android는 그동안 비동기를 처리할 때 AsyncTask API를 사용하였습니다. 하지만, Android API 30 이상부터 AsyncTask가 Deprecated(1)가 되었습니다. (1) Deprecaterd.. 2022. 5. 30.
[RxJava] 3.Observable 란? Observable Observable은 데이터 흐름에 맞게 알림을 보내 구독자가 데이터를 처리할 수 있도록 한다. Observable은 옵서버 패턴을 구현하며, 리액티브 프로그래밍은 Observable로 시작해서 Observable로 끝난다고 해도 과언이 아니다. 안드로이드에서 버튼을 클릭하면 이벤트를 받을 수 있게 하는 OnClickListener가 대표적인 옵서버 패턴의 예라고 볼 수 있다. RxJava에서 Observable은 세 가지를 구독자에게 전달한다. onNext : Observable이 데이터의 발행을 알린다. 기존의 옵서버 패턴과 같다 onComplete : 모든 데이터가 발행이 완료되었음을 알린다. 그러므로 더 이상의 onNext는 발생하지 않으며, 마지막에 딱 한 번만 호출된다. o.. 2022. 5. 29.
[RxJava] 6.Scheduler Scheduler 1. Schedulers 개요 Observable 연산자 체인에 멀티스레딩을 적용하고 싶다면, 특정 스케줄러를 사용해서 연산자(또는 특정 Observable)를 실행하면 된다. ReactiveX의 일부 Observable 연산자는 사용할 스케줄러를 파라미터로 전달받기도 하는데, 이 연산자들은 자신이 처리할 연산의 일부 또는 전체를 전달된 스케줄러 내에서 실행한다. 기본적으로, Observable과 연산자 체인은 이처럼 스케줄러를 통해 동작하고 Subscribe 메서드가 호출되는 스레드를 사용해서 옵서버에게 알림을 보낸다. SubscribeOn 연산자는 다른 스케줄러를 지정해서 Observable이 처리해야 할 연산자들을 실행시킨다. 그리고, ObserveOn 연산자는 Observable.. 2022. 5. 29.
mimik - edge clouding solution mimik - edge clouding solution MIMIK의 edge clouding solution 은 모든 edge devices 가 서버 역할을 수행할 수 있게 하는 소프트웨어 솔루션으로 성능과 효율성을 개선하는 동시에 대기시간, 비용 및 탄소발생을 줄이는 획기적인 솔루션입니다. Hybrid edgeCloud Platform 이란? 차세대 하이브리드 edgeCloud 인프라를 구축하기 위한 플랫폼으로 모든 컴퓨팅 장치가 서버 역할을 할 수 있도록 하여 모든 컴퓨팅 장치가 애플리케이션 계층에서 직접 통신할 수 있도록 합니다. Hybrid edgeCloud platform 플랫폼에는 edgeEngine, mimik 백엔드 서비스 및 관련 마이크로서비스가 포함 엔진은 OS, device, netw.. 2022. 5. 28.
728x90

티스토리툴바